среда, 11 августа 2010 г.

robots.txt для Яндекса

Для чего нужен файл robots.txt. C помощью правильного robots.txt можно существенно ускорить и улучшить индексацию своего сайта поисковыми системами. Так же в файле robots.txt необходимо прописать директиву Host для определения главного зеркала сайта для Яндекса. Примеры правильных вариантов файла robots.txt для сайтов на Joomla, блогов на WordPress и форумов на SMF.

Правильный robots.txt для WordPress

1 комментарий: