Уважаемые форумчане. Посоветуйте пример нормального файла robots.txt для блога на WordPress. То что сейчас стои у меня - вот. Но, например, вычитал, что Disallow: /category/*/* - это не правильно, правильно будет Disallow: /category/* Посоветуйте, кто в теме.
| Код |
|---|
User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /category/*/*
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments
Host: мой хост
Sitemap: http://мой сайт/sitemap.xml
Sitemap: http://мой сайт/sitemap.xml.gz
|
А также подскажите, нужно ли на WordPress две карты сайта, одна в .xml, а другая обычной страницей в меню, тоесть перечень ссылок.
