Question

Приветствую. Давно пользуюсь системой uCoz и поисковиком Yandex. Давно замечаю, что в яндекс вебмастере постоянно написано не правильное количество страниц в поиске. 

 

Вот к примеру, яндекс проиндексировал на моём сайте 14566  страниц, из которых исключил из поиска 2732 и оставил в поиске 6774. И тут у меня вопрос, куда могут деться остальные страницы? Почему некоторые страницы вообще не индексируются?

Вот например, я зашел в раздел 'Исключённые страницы' 

Там мне пишут, что исключено из поиска 2664 страницы по причине '

HTTP-статус: Ресурс не найден (404)' Хотя прикол в том, что исключённые страницы есть у меня на сайте и они даже есть в поиске, но числятся в списке исключённых. 

 

Вот например:

А вот он в поиске:

Не понятно почему так и что делать. И самое интересно то, что яндекс к исключённым страницам добавляет не правильную ссылку.

Вот пример правильной ссылки:

http://stalker-gaming.ru/load/mody_stalker/chistoe_nebo/stalker_presky/3-1-0-2086

А вот такую ссылку яндекс добавляет в исключённые: 

http://stalker-gaming.ru/load/mody_stalker/chistoe_nebo/stalker_presky/h

 

Почему он цифры заменяет буквой H? Причём все ссылки так:

http://stalker-gaming.ru/load/mody_stalker/chistoe_nebo/sniper_mod_v1_4/h

http://stalker-gaming.ru/load/mody_stalker/chistoe_nebo/soc_style_addon_v2_0/h

http://stalker-gaming.ru/load/mody_stalker/chistoe_nebo/solinx/h

http://stalker-gaming.ru/load/mody_stalker/chistoe_nebo/solinx_for_clear_sky_soljanka_obnovleno_22_10_08/h

Вот это мне не понятно..

Может быть знает кто, в чём проблема и как решить?? 

Answer 1

Так же прочитайте, как убрать дубли страниц из поиска, через $CANONICAL$: http://forum.ucoz.ru/forum/60-62981-1

Comments

Благодарю. Я прочитал данную пабликацию и действительно, я пользовался вхождением одного материала в несколько категорий и изменением даты публикаций материалов. 

---

Не могу понять, как пользоваться этим $CANONICAL$

---

Вставляете в основные шаблоны (Вид материалов и комментариев к нему / Раздел / Категория / главная модуля)

<link rel="canonical" href="$ENTRY_URL$" />

---

При переносе например, из одной категории файл в другую, будет ли меняться ссылка в поиске после этого?

---

Да будет. Этого я настоятельно не рекомендую делать.

Answer 2

1. По исключенным страницам, страницы могут быть в поиске, исключаются дубли этих страниц.

2. Вижу у вас устаревший Robots - http://stalker-gaming.ru/robots.txt который бы стоило обновить и заменить на:

User-agent: * 
Allow: /*?page 
Allow: /*?ref= 
Disallow: /*? 
Disallow: /stat/ 
Disallow: /index/1 
Disallow: /index/3 
Disallow: /register 
Disallow: /index/5 
Disallow: /index/7 
Disallow: /index/8 
Disallow: /index/9 
Disallow: /index/sub/ 
Disallow: /panel/ 
Disallow: /admin/ 
Disallow: /informer/ 
Disallow: /secure/ 
Disallow: /poll/ 
Disallow: /search/ 
Disallow: /abnl/
Disallow: /404.html
Disallow: /away.html  
Disallow: /*_escaped_fragment_= 
Disallow: /*-*-*-*-987$  
Disallow: /*0-*-0-17$ 
Disallow: /*-0-0- 

Sitemap: http://stalker-gaming.ru/sitemap.xml 
Sitemap: http://stalker-gaming.ru/sitemap-forum.xml

это так же поможет роботам дополнительно перепроверить ваш сайт на присутствие дублей которые не должны участвовать в поиске.

Неправильная ссылка может формироваться из-за сторонних скриптов, которые вы возможно ранее использовали. Сейчас я подобного скрипта не нашел который бы формировал неправильные ссылки, если такой был и был удален, пройдет время и данные ссылки исчезнут конечно не так быстро.

Comments

Благодарю за ответ. Обязательно заменю свой robots.txt скинутый вами. Никаких сторонних скриптов я никогда не использовал и не использую. И дублирующийх страниц 2600 никак не может быть, хотя, я используюсь иногда вхождением одного материала в несколько категорий и изменением даты публикаций материалов, но это десятки а не тысячи. 10-50 примерно.

---

о каноникал читаем в материале - http://www.ucoz.ru/qa/index.php/21077