В Drupal есть распространяемый с ним файл robots.txt, в котором уже заданы некоторые правила.
Его можно редактировать руками, чтобы добавить свои директивы, но тогда надо поддерживать в актуальном состоянии при обновлении, так как есть вероятность, что при обновлении он затрется.
Чтобы этого избежать, в ELiS добавлен функционал, который автоматически добавляет необходимые директивы в robots.txt, необходимы для корректной работы ELiS.
Директивы добавляются или обновляются автоматически при вызове Cron, вам ничего не надо специально настраивать.
Сгенерированные директивы будут добавлены между "# ELiS generated rules start" и "# ELiS generated rules end". Вам не стоит ничего менять между этими комментариями, так как все содержимое между ними будет обновлено при периодическом вызове Cron.
Пример сгенерированных директив в robots.txt.
# ELiS generated rules start Clean-param: viewMode / Clean-param: kiosk / Clean-param: chromeColor / Clean-param: textColor / Clean-param: redirect / # ELiS generated rules end
Также появилась команда для drush elis-update-robotstxt:
# su elis $ cd /var/www/vh/library $ drush elis-update-robotstxt
Просмотреть актуальный файл можно в /var/www/vh/library/robots.txt.