Дополнительные настройки robots.txt

С стандартный robots.txt после записи "Disallow: /bitrix/" нужно добавить еще две строчки.
В итоге получится следующее:

...
Disallow: /bitrix/
Allow: /bitrix/cache/js/
Allow: /bitrix/cache/css/
...

Это необходимо для скачивания и индексирования css и js кеша сайта когда у него отключен CDN.


Оставить комментарий