Question

Нужно ли менять что либо в файле  robots.txt при прикреплению домена от reg.ru к сайту на ucoz Прикрепил домен soundtest.pw к 595.ucoz.net что делать в файле  robots.txt. дописывать 

Sitemap: http://soundtest.pw/sitemap.xml  
Sitemap: http://www.soundtest.pw/sitemap.xml
Host: soundtest.pw
Sitemap: http://595.ucoz.net/sitemap.xml  
Sitemap: http://www.595.ucoz.net/sitemap.xml
Host: 595.ucoz.net

 

Answer 1

Отредактируйте ваш файл роботс и замените содержимое на:

 

User-agent: Twitterbot

Disallow: *

 

User-agent: *

Allow: /*.js

Allow: /*.css

Allow: /*.jpg

Allow: /*.png

Allow: /*.gif

Allow: /*?ref=

Allow: /images

Allow: /archives

Disallow: /*?

Disallow: /stat/

Disallow: /index/1

Disallow: /index/3

Disallow: /register

Disallow: /index/5

Disallow: /index/7

Disallow: /index/8

Disallow: /index/9

Disallow: /index/sub/

Disallow: /panel/

Disallow: /admin/

Disallow: /informer/

Disallow: /secure/

Disallow: /poll/

Disallow: /search/

Disallow: /abnl/

Disallow: /*_escaped_fragment_=

Disallow: /*-*-*-*-987$

Disallow: /gb

Disallow: /index/reklama_na_saite

Disallow: /*0-*-0-17$

Disallow: /*-0-0-

 

Sitemap: http://soundtest.pw/sitemap.xml  

 

Host: soundtest.pw