Question

 Добрый день. Подскажите пожалуйста что и куда добавить в файле robots.txt для корректного определения главного зеркала.

Достаточно ли добавить в robots.txt ?

    Host: http://свадебныйсезон.рф

или нужно так?

    Disallow: Host: http://свадебныйсезон.рф

В нужном ли месте добавлена запись Host:?

 

User-agent: *

Disallow: /a/

Disallow: /stat/

Disallow: /index/1

Disallow: /index/2

Disallow: /index/3

Disallow: /index/5

Disallow: /index/7

Disallow: /index/8

Disallow: /index/9

Disallow: /panel/

Disallow: /admin/

Disallow: /secure/

Disallow: /informer/

Disallow: /mchat

Disallow: /search

Disallow: /shop/order/

Disallow: /?ssid=

Disallow: /abnl/

Disallow: /google

Disallow: /twitter

Disallow: /facebook

Disallow: /yandex

Disallow: /vkontakte

Host: Http://ГЛАВНОЕ_ЗЕРКАЛО.РФ  <--- (Если добавлю запись будет верной?) 

Sitemap: http://xn--80acbjfboo9adk0ah2l.xn--p1ai/sitemap.xml

Sitemap: http://xn--80acbjfboo9adk0ah2l.xn--p1ai/sitemap-forum.xml

Sitemap: http://xn--80acbjfboo9adk0ah2l.xn--p1ai/sitemap-shop.xml

Вот что рекомендует Яндекс. Для корректного определения главного зеркала сайта рекомендуется задать соответствующую директиву Host в файлах robots.txt всех зеркал сайта. В случае ее отсутствия главное зеркало может быть выбрано автоматически.

Добавьте директиву Host в файл robots.txt.

 Для кирелического домена будет ли верной запсь в файле robots.txt http://свадебныйсезон.рф?

Или правильно будет так http://xn--80acbjfboo9adk0ah2l.xn--p1ai

Нужно писать с http://  или www.  ?

Спасибо!

Answer 1

Писать без http://, писать с www если сайт добавлен в вебмастер с www и индексируется с www, если без него, то и в хост писать без www

Comments

Спасибо. Но я всё равно не понял :(    Добавлен с http://  как писать без http просто мойсайт.рф

---

Сергей Бусаров,

Все верно поняли писать чистое название домена без http и без слеша в конце, для хоста правильно писать домен в pynycode:

Host: xn--80acbjfboo9adk0ah2l.xn--p1ai

---

Огоромное спасибо! А поповоду самой записи в robots.txt под спойлером, если в данное место добавлю, будет корректно?

---

Сергей Бусаров,

В данное место только в pynycode,  а не как у вас под спойлером, тогда будет правильно.

---

Уф! Спасибо! Сейчас изменю. Верне добалю строчку.