Question

Здравствуйте, имею сайт с фильмами, какой именно атрибут лучше выставить на странице материала и комментариев к нему?

 <meta name="robots" content="none" />

или

 <meta name="robots" content="all" />

Видел некоторые ставят первый вариант почему? он же не индексирует текст и ссылки

Answer 1

Первый ставят чтобы запретить индексацию. Второй разрешает индексировать все. Смысла нет от тегов этих так как по умолчанию и так все разрешено индексировать, что не запрещено в роботсе.