Как изменить robots.txt

голоса: 0

Здравствуйте.

Помогите, пожалуйста, разобраться с одним вопросом.

После покупки домена второго уровня я хочу указать новый домен в качестве основного зеркала в Яндекс Вебмастер. Сейчас в Вебмастере Яндекса у меня добавлено 2 сайта, один из них со старым адресом, домен третьего уровня at.ua, а другой с новым - домен ру. Я хотела их склеить и указать при этом главным зеркалом домен ру, но сделать этого не могу, потому что домен mirsega.at.ua уже запрещен к индексации в файле robots.txt.

Я так понимаю, что после прикрепления домена второго уровня Юкоз автоматически блокирует домен третьего уровня в robots.txt. Верно?

Вот что по этому поводу пишет поддержка Яндекса:

Дело в том, что сайт mirsega.at.ua в данный момент запрещен к индексированию в файле robots.txt директивой:
User-agent: *
Disallow: /
Из-за этого запрета робот не может посетить сайт, чтобы проверить оба сайта на идентичность. Для склейки оба сайта должны быть доступны и отдавать одинаковый контент. Чтобы склеить сайты в группу зеркал, я рекомендую убрать данный запрет. Если же возможности убрать запрет вручную нет, Вы можете обратиться к администратору сервера, на котором расположен сайт, либо хостинг-провайдеру.

Вопрос в следующем, что нужно сделать чтобы сайт со старым адресом был доступен к индексированию в robots.txt для того, чтобы склеить домены и указать переезд сайта в Яндекс Вебмастер на новый домен?

Адрес сайта http://mir-sega.ru
| Автор: | Категория: Домен для сайта

Ответов: 2

голоса: 0
 
Лучший ответ
Проблема исправлена
| Автор:
Выбор ответа лучшим | | Автор: Yuri_Geruk
Большое спасибо!
голоса: 0

В общих настройках сайта отметьте пункт - Разрешить индексацию системного поддомена, это откроет доступ к системному домену в роботсе которого пропишите директиву Host: site.ru где вместо site.ru ваш прикрепленный домен. 

| Автор:
Загрузила, но он у меня почему-то имеет название robots-1-.txt. Нужно переименовывать?
Катя,
Переименуйте как нужно на robots.txt

Но все равно мне один момент не ясен, даже если прописать хост в директиве, как подтвердить переезд сайта в Гугле, если на старом домене все равно запрещена индексация полностью.

И почему включенная галочка в Общих настройках - Разрешить индексация системного поддомена - не выполняет своих функций?

Катя,
В гугле подтверждать не нужно, просто добавить сайт по прикрепленному домену, гугл прочтет роботс увидит директиву хост и сделает прикрепленный домен основным зеркалом, в яндексе аналогично нужно сделать, по прикрепленному домену добавить заново, по стандартному не удалять сайт с вебмастера в течение 1 месяца. Для обоих новых доменов в вебмастерах яндекса и гугла добавить карты сайта в имеющиеся встроенные инструменты в вебмастере. После ждать склейки и переиндексации, вот и все.
То есть, хотите сказать, что никто ничего чинить не будет, и функция Разрешить индексацию системного поддомена как не работала, так и не будет работать?
...