Роботы Апорта (Неактуально)

Как сделать, чтобы Апорт качественно проиндексировал сайт
Вопросы по индексацииации

Апорт и robots.txt

При просмотре содержимого сервера для индексирования Апорт проверяет файл robots.txt. Так что вы можете использовать его, чтобы ограничить «деятельность» Апорта на своем сервере.

При желании установить селективные ограничения только для Апорта следует использовать в качестве имени робота слово Aport.

Также поддерживаются мета теги Robots, позволяющие, в частности, установить правила поведения робота на вашем сайте, даже в случае, если вы не имеете возможности изменять файл robots.txt на сервере.