Доступ к URL заблокирован в файле robots.txt

голоса: +2

Привет,сайту ровно месяц!!

Сегодня добавил его в гугл поиск и яндекс,в гугл веб мастере меня заинтриговала ошибка..добавил карту сайту и вот какое сообщение получил 

Доступ к URL заблокирован в файле robots.txt.
Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.

Скриншоты к проблеме:

Адрес сайта http://faq-seo.at.ua/
| Автор: | Категория: SEO
Изменение категории | | Автор: Rostislav

Ответов: 2

голоса: +3
 
Лучший ответ
Указанные URL на скриншотах на данный момент разрешены к индексации. Вероятней всего совсем недавно с вашего сайта был снят карантин, а сайт попал на индексацию ещё на карантине. Ошибки будут в вебмастере висеть ещё долго, но это не значит, что указанные URL не индексируются. Проверить доступ к интересующим вас URL можно тут https://webmaster.yandex.ua/robots.xml и в самом вебмастере Google
| Автор:

Я в яндексе добавлял сайт когда он был на карантине)В гугл только сегодня зареггистрировался и добавил )В яндексе пишет то же ошибку,ну там написанно что она пропадёт)Ну главное что бы всё норм было)Спасибо всем за помощь,будем ждать!

голоса: +3
Ваш сайт не запрещен к индексации и снят с карантина.

Не все страницы, которые есть на сайты должны индексироваться поисковыми роботами. Именно поэтому и нужен файл robots.txt, которые сообщает поисковым роботам о страницах, которые не следует индексировать.

В файле sitemap отображаются все страницы вашего сайта, в т.ч. и те, которые запрещены к индексации в файле robots.txt

Поэтому ничего страшного в этой ошибке я не вижу.
| Автор:
...