Robots.txt и sitemap.xml для Wordpress блога
Только сейчас сделал robots.txt и sitemap.xml для сайта. Че-то robots.txt в дистрибутив Wordpress не включен, хотя стоило бы. Хотя думаю есть плагины соответствующие. У меня получился такой текст:
# BEGIN XML-SITEMAP-PLUGIN – Плагин генератор карты сайта для поисковиков.
Sitemap: http://corumcctv.ru/sitemap.xml.gz # Карта, сжатая в архив для экономии траффика роботам
# END XML-SITEMAP-PLUGIN
Читать далее Robots.txt и sitemap.xml для Wordpress блога