Как помочь роботу быстрее индексировать сайт

Чтобы ускорить появление страниц сайта в поиске, воспользуйтесь нашими рекомендациями — во-первых, исключите из индексирования ненужную информацию, во-вторых, сообщайте роботу о новых страницах. Для этого:

 

  • запретите в robots.txt индексирование страниц, неинтересных пользователям. Например, формы ответа на форуме, статистику посещений, страницы с результатами поиска, сайты-зеркала, документы на нераспространенных в рунете языках;
  • создайте файл Sitemap с дополнительной информацией о страницах сайта, подлежащих индексированию;
  • создайте карту сайта, то есть страницу или несколько страниц, которые содержат ссылки на все документы сайта;
  • настройте сервер на выдачу корректных заголовков ответов (например, если страница не существует, выдавать ошибку 404, а если поступил запрос If-Modified-Since, то выдавать код 304, если страница с указанной в запросе даты не изменялась).
Категория: Мои статьи | Добавил: Luntick (12.02.2011)
Просмотров: 646 | Рейтинг: 0.0/0
Всего комментариев: 0
Добавлять комментарии могут только зарегистрированные пользователи.
[ Регистрация | Вход ]