Правильный robots.txt при установленном Pretty URLs

Started by XsplintX, September 07, 2013, 10:09:49 AM

Previous topic - Next topic

XsplintX

Здравствуйте, в общем установил на свой форум мод "Pretty URLs", дабы на форуме были ЧПУ (Человеку Понятные Урл), но я не могу найти информацию негде, касательно правильного robots.txt при установленной данном моде. Посмотрел hxxp:dragomano.ru/page/pravilnyj-robotstxt-dlja-smf [nonactive] Буго, касательно правильного роботса, но там вся инфа идет про форумы без установленного ЧПУ.

Так же установил мод Optimus Brave, он мне советует данный robots.txt:
QuoteUser-agent: Googlebot-Image
Disallow: /

User-agent: YandexImages
Disallow: /

User-agent: msnbot-MM
Disallow: /

User-agent: Googlebot-Mobile
Allow: /*wap
Disallow: /

User-agent: YandexImageResizer
Allow: /*wap
Disallow: /

User-agent: MediaPartners-Google
Allow: /

User-agent: Baiduspider
Disallow: /

User-agent: *
Allow: /$
Allow: /*sitemap
Disallow: /*action
Disallow: /*wap
Disallow: /*board=*wap
Disallow: /*topic=*wap
Disallow: /*topic=*.msg
Disallow: /*topic=*.new
Disallow: /*;
Disallow: /*PHPSESSID
Allow: /*board
Allow: /*topic
Disallow: /
Sitemap: hxxp:forum.site.ru/sitemap.xml [nonactive]
Crawl-delay: 5
Clean-param: PHPSESSID /index.php
Host: hxxp:forum.site.ru [nonactive]

Но этот robots.txt никоим образом не подходит для форума, на котором стоит мод ЧПУ "Pretty URLs"

Буду Вам очень признателен, если поможете подобрать правильный robots.txt на форум, у которого установлен мод ЧПУ "Pretty URLs".

Advertisement: