Question

Здравствуйте! Подскажите правильный robots?  Как заблокировать все страницы кроме главной?  Как сделать чтобы удалить старые страницы из поиска yandex.  Спасибо

Answer 1

robots не является надежным методом. если надо исключить из поиска и запретить индексирование всех страниц кроме главной, пропишите на ненужных страницах в секции head

 <meta name="robots" content="none" />

Comments

В разделе пользователи прописывать, страницы сайта, комментарии, поиск по сайту прописывать?

---

в страницы сайта может входить и главная, если главная установлена главной, отдельной страницы комментариев нет. остальное решаем сами. слишком размытый вопрос все кроме главной без адреса сайта

---

webanet,

Я прописал. Можете посмотреть. Вот сайт mp3sbornik.smp3s.ru. Какой робот прописать так как я его удалил.

---

файл роботс не удален. вот он http://www.mp3sbornik.smp3s.ru/robots.txt там стоит странный запрет на индексацию яндексу. если удалить файл robots.txt из файлового он заменится системным. у вас главная - это каталог статей. вы и её заблокировали в шаблоне главной каталога не стоило прописывать мета-тег.

---

webanet,

Это ответ от технической поддержки. Для того чтобы удалить страницы мз поиска. Посмотрите пожалуйста.  Какой робот прописать теперь.

---

что такое страницы мз? вы удалили из поиска весь сайт. то есть из яндекса. а что вам надо я не понимаю

---

webanet,

А где Вы увидели мз?

Я хочу заново переиндексировать сайт. так  как он полностью передлан а старые страницы остались в поиске. Может стиот отпправить на периндексацию?

Какой робот прописать?

 

---

Это ответ от технической поддержки. Для того чтобы удалить страницы мз поиска. Посмотрите пожалуйста.  Какой робот прописать теперь.

вотгде увидела.вы запретили к индексации весь сайт. если нужна переиндексация удалить файл robots что вам насоветовали и удалить мета тег 

  <meta name="robots" content="none" /> и больше ничего не трогать

---

webanet,

а это опечатка из поиска!

 <meta name="robots" content="none" /> везде убрать?

Робот убрать из файлового?

---

везде убрать и файл robots.txt удалить и в вебмастере запросить переобход главной и ждать и больше ничего не трогать

---

webanet,

Огромное спасибо.  а категории не делать переобход?

---

можно дать и категории но после полного запрета быстро точно не будет

---

webanet,

Огромное спасибо.  Как я понимаю. Если я меняю сайт а именно категории - то всегда отправлять на переобход?

---

да можно конечно на переобход, но больше не надо полностью запрещать индексацию