Файл robots.txt содержит правила для роботов поисковых систем. В нем указывается какие файлы и папки индексировать, а какие нет, основной домен сайт и ссылка на карту сайта.
Ошибка 502 и как с ней бороться 10951
Интерактивная карта объектов с помощью Яндекс.Карт и инфоблоков 9051
Как добавить счетчик Яндекс Метрики на сайт с 1С Битрикс? 8244
Настройка кеширования и сжатия в 1С Битрикс для Google PageSpeed 5173
Получение и установка бесплатного SSL сертификата Let’s Encrypt на 1C-Битрикс: Виртуальная машина для nginx 4579