robots.txt для ElkArte
Robots.txt — это текстовый файл, который содержит параметры индексирования сайта для роботов поисковых систем.
Рекомендуемый:
User-agent: *
Disallow: /*action
Disallow: /*topic=*.msg
Disallow: /*topic=*.new
Disallow: /*PHPSESSID
Disallow: /*;
Allow: /$
Allow: /*board
Allow: /*topic
Allow: /*.xml
Allow: /*sitemap
Allow: /*.css$
Allow: /*.js$
Allow: /*.png$
Allow: /*.jpg$
Allow: /*.gif$
Sitemap: http://ruelkarte.ru/sitemap.xml
robots.txt