Задача:
Нужно управлять индексированием с помощью robots.txt
Решение
Варианты
- Использовать модуль RobotsTxt
- Изучить полезные ссылки внизу и вручную изменить файл robots.txt
Использовать модуль RobotsTxt
Модуль позволяет создавать разные файлы robots.txt для разных сайтов при использовании мультисайтовости, а также редактировать этот файл через веб-интерфейс.
Описание модуля.
Полезные ссылки
- Все о файле robots.txt по-русски
- robots.txt . Материал из Википедии — свободной энциклопедии
- Как правильно составить robots.txt
- Как управлять индексированием сайта
- Все, все, все о Robots.txt - действительно очень много информации. Есть валидатор robots.txt.
- http://your-cms.info/drupal/basic_drupal/8 - объяснения директив в robots.txt для Drupal
Bookmark/Search this post with
