Question

Как настроить робот.тхт для доски объявления что бы робот имел доступ ко всем разделам и категориям а так же материалам

Comments

• > Почему sitemap не показывает страницы доски объявлений , а конкретнее не отображаются категории и разделы
• >> В карте формируются ссылки лишь на страници материалов, но не категорий, ссылки на категориии  разделы робот сам подхватывает и индексирует по мере обнаружения.

Answer 1

Стандартно он уже имеет везде доступ куда нужно, вам дополнительно ничего настраивать не нужно.