То ли поисковики слепые, то ли я прозрачный?

30 апреля 2013, 14:30

На моем личном сайте исключительно эксклюзивный контент. Но поисковики его как будто не видят. В чем могут быть причины? Какие я допустил ошибки?

  • Леонид Гроховский
    Леонид Гроховский ТопЭксперт.РФ, руководитель
    Чтобы ваш контент попал в индекс должны выполниться несколько условий:
    а) робот должен узнать о существовании контента;
    б) сайт и контент должны пройти фильтры.

    Теперь разберем по пунктам, выполнение этих условий:
    а) Варианты уведомления робота:
    — sitemap.xml;
    — ping сервисы;
    — кабинет вебмастера;
    — метрика, аналитикс, счетчики;
    — бары поисковых систем;
    — ссылка на контент.

    б) После того, как робот нашел ваш контент, ему еще предстоит пройти фильтрацию и только потом он попадет в индекс. Фильтры:
    — текстовый антиспам;
    — ссылочный антиспам;
    — проверка на вирусы;
    — проверка на низкий стат вес;
    — проверка на наличие дублей.

    Если все фильтры пройдены — робот с радостью добавит в индекс ваш контент.
  • Андрей Воропаев
    Андрей Воропаев Trilan, председатель совета директоров
    Как показывает практика — в первую очередь, стоит еще раз проверить «эксклюзивность». Бывает что копирайтеры пишут на сходные темы сразу нескольким изданиям.

    Возможно, сайт банально забанен. Возможно, CMS автоматически создает множество дублей Проверьте robots.txt, sitemap.xml, meta robots и связи (ссылки между документами) — возможно, доступ к страницам ограничен инструкциями или технически невозможен.

    Проверьте отображение страницы без скриптов, css и картинок — возможно, контент виден пользователям но не виден поисковикам (например, выводится через ajax или стоит редирект в зависимости от IP, или загрузка контента начинается только после выполнения какого-то скрипта).

    Есть и совсем невероятный случай — сайт в порядке но поисковики о нем просто не знают (нет ссылок, не индексируется).
  • Наталья Сахнова
    Наталья Сахнова SeoPult, директор по маркетингу
    Проблемы с индексацией обычно возникают из-за ошибок в robots.txt, HTML-коде, настройках CMS и веб-сервера.

    Чтобы установить конкретную причину для конкретного случая, необходимо провести мини-аудит. Но копать нужно в направлении «где я забыл снять запрет на индексацию».

    Чтобы удостовериться, что робот-паук знает о сайте, добавьте его в «аддурилку».