Question

Здравствуйте. Никогда не замечал, может вы мне растолкуете, заметил в Яндекс мастере такие страницы у сайта в поиске: http://shedar.ru/_ld/2/270_si6.exe?lng=es, что это за страницы, откуда они взялись. Не подскажите?

Answer 1

Отредактируйте ваш файл роботс:

User-agent: * 
Disallow: /a/ 
Disallow: /stat/ 
Disallow: /panel/ 
Disallow: /admin/ 
Disallow: /secure/ 
Disallow: /informer/ 
Disallow: /mchat 
Disallow: /search 
Disallow: /shop/order/ 
Host:shedar.ru

Sitemap: http://shedar.ru/sitemap.xml 
Sitemap: http://shedar.ru/sitemap-forum.xml 

замените его на:

User-agent: *
Allow: /*?page
Allow: /*?ref=
Disallow: /*?
Disallow: /stat/
Disallow: /index/1
Disallow: /index/3
Disallow: /register
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /index/sub/
Disallow: /panel/
Disallow: /admin/
Disallow: /informer/
Disallow: /secure/
Disallow: /poll/
Disallow: /search/
Disallow: /abnl/
Disallow: /*_escaped_fragment_=
Disallow: /*-*-*-*-987$
Disallow: /*0-*-0-17$
Disallow: /*-0-0-

 

Host:shedar.ru

 

Sitemap: http://shedar.ru/sitemap.xml 
Sitemap: http://shedar.ru/sitemap-forum.xml

после эти страницы которые вы приводите в пример индексироваться не будут так как директива Disallow: /*? не даст их индексировать.

Comments

спасибо, а что это зафайл такой для скачки это мой? Как его найти и удалить если это мой.  И такой вопрос, тоже по Яндекс мастеру, в нем ного страниц дублей, как их закрыть?

---

Роман Мальцев,

Это ссылка скачать удалено, при нажатии срабатывает системный редирект, вот это и есть он. Как говорил, обновите роботс, удалять ничего не нужно дубли сами вылетят после перепроверки яндексом и переиндексации сайта примерно сроком в 1 месяц.