Сайта нет в Google: как найти причину по шагам

Сайт готов, вы отправили ссылку друзьям, а через неделю набираете в Google название своей фирмы и не находите себя ни на первой странице, ни на третьей. Первая мысль: что-то сломано. Иногда так и есть, но чаще причина проще.

За фразой «меня нет в Google» прячутся две разные ситуации, и лечатся они по-разному:

• Google не знает о странице. Её нет в индексе, то есть в базе страниц, из которой Google собирает выдачу. Здесь ищем, что мешает.
• Google знает, но показывает далеко. Страница в индексе, просто по вашему запросу выше стоят другие. Это уже вопрос содержания, ссылок и времени, а не поломки.

Ниже порядок проверки, который можно пройти самому за вечер, без программиста и без кода. Коротко: запрос site:, затем три места в Search Console, затем список частых причин.

Шаг 1. Запрос site: в Google

Наберите в Google site:vashdomen.fr (без пробела после двоеточия, без https и www). Google покажет страницы вашего домена, которые есть у него в индексе. Чтобы проверить одну страницу, вставьте её адрес целиком: site:vashdomen.fr/uslugi/.

• Результатов нет совсем. Сайт не в индексе. Переходите к шагу 2 и к списку причин.
• Результаты есть. Сайт в индексе, проблема в позиции. Об этом ниже, в разделе «Если сайт в индексе, но далеко».

Две оговорки. Google сам пишет, что site: показывает не все проиндексированные страницы, поэтому для точного ответа по одной странице есть Search Console. И если в браузере включён Безопасный поиск, он может скрывать часть результатов: для проверки его лучше выключить.

Шаг 2. Search Console: три места

Google Search Console - бесплатный кабинет Google для владельца сайта. Подключить его можно без программиста: на WordPress проще всего через плагин Google Site Kit, на любом сайте через запись DNS у регистратора домена. Данные в отчётах появляются не сразу, поэтому подключайте сейчас, даже если сайт вроде бы в порядке.

Проверка URL

Вставьте адрес страницы в строку поиска вверху Search Console. Ответ будет «URL есть в индексе Google» или «URL нет в индексе Google», с причиной. Кнопка «Проверить страницу на сайте» смотрит текущую версию, а «Запросить индексирование» просит Google зайти снова.

Отчёт об индексировании страниц

В меню слева раздел «Индексирование», пункт «Страницы». Сверху два числа: «Проиндексировано» и «Не проиндексировано». Ниже список причин, почему страницы не попали в индекс. Это главный отчёт для нашей задачи.

Файлы Sitemap

В меню слева раздел «Индексирование», пункт «Файлы Sitemap». Карта сайта (sitemap) - список адресов, который сайт подаёт Google. У WordPress с Yoast SEO она обычно лежит по адресу /sitemap_index.xml. Впишите его в поле «Добавьте файл Sitemap», нажмите «Отправить» и проверьте, что статус «Успешно».

Причины в отчёте об индексировании звучат пугающе, но большинство из них нормальны. «Страница с переадресацией» или «Вариант страницы с тегом canonical» часто означают, что Google просто выбрал правильный адрес из нескольких. Тревожиться стоит, если в причинах оказались страницы, которые вы хотите видеть в поиске: главная, услуги, контакты.

Частые причины и как их увидеть

Остался noindex после разработки

Как увидеть: В отчёте: «Страница содержит директиву noindex». Это метка в коде страницы, которая просит поисковики её не показывать.

Что сделать: Снять метку. В Yoast SEO: блок под текстом страницы, на вкладке SEO раскройте раздел «Дополнительно» и на вопрос «Позволить поисковым системам показывать это содержимое в результатах поиска?» выберите «Да».

Галочка в WordPress

Как увидеть: «Настройки» > «Чтение», пункт «Видимость для поисковых систем». На главной консоли в блоке «На виду» висит памятка «Поисковые системы заблокированы».

Что сделать: Снять галочку «Попросить поисковые системы не индексировать сайт» и сохранить.

Запрет в robots.txt

Как увидеть: «Доступ к URL заблокирован в файле robots.txt». Это файл с правилами для поисковых роботов, открывается по адресу vashdomen.fr/robots.txt.

Что сделать: Строка Disallow: / закрывает весь сайт, её нужно убрать. На WordPress с Yoast SEO файл правится в «Yoast SEO» > «Инструменты» > «Редактор файлов». Если там его нет или правка не сохраняется, это уже задача для веб-мастера.

Страница-заглушка

Как увидеть: Посетители видят «скоро открытие» или страницу «на обслуживании», сайт закрыт паролем.

Что сделать: Выключить режим заглушки, когда сайт готов. Google видит то же, что и гость без пароля.

Дубли и canonical

Как увидеть: «Страница является копией…» или «Вариант страницы с тегом canonical». Canonical - метка «главная версия этой страницы».

Что сделать: Если в индексе стоит нужный адрес, ничего не делать. Если не тот, разбираться, откуда дубли.

Сайт новый, ссылок нет

Как увидеть: «Обнаружена, не проиндексирована» или «Страница просканирована, но пока не проиндексирована».

Что сделать: Ждать, отправить Sitemap, получить первые ссылки (о них ниже). Если статус держится месяцами, Google пока не считает страницу полезной: смотрите её содержание (ссылка на статью про базовое SEO ниже).

Первые три причины встречаются чаще, чем кажется. Во время разработки сайт закрывают от поисковиков, чтобы недоделанная версия не попала в выдачу, а при запуске про это забывают. Галочка WordPress и noindex - одна строка, но с ней сайт может годами жить невидимым.

Есть тонкость с robots.txt. Если страница запрещена в нём, Google её не читает и не видит метку noindex. Поэтому, чтобы открыть страницу для поиска, убирать надо оба запрета.

Сколько ждать

Точного срока Google не называет. В справке сказано, что от публикации до индексирования новой страницы может пройти от одного дня до нескольких недель, а после запроса индексирования или отправки Sitemap стоит подождать хотя бы неделю. Изменения на уже известном сайте Google учитывает за срок от нескольких часов до нескольких месяцев, обычно результат виден через несколько недель. И Google прямо оговаривает, что не гарантирует индексирования даже аккуратного сайта.

Что помогает на самом деле:

• Ссылки на сайт. Google находит большинство страниц по ссылкам с уже известных ему страниц. Для небольшого бизнеса во Франции первые ссылки - это карточка в Google Maps, профили в соцсетях, справочники, сайт партнёра или поставщика.
• Внутренние ссылки. До каждой важной страницы должно быть можно дойти с главной через меню или ссылки в тексте.
• Sitemap в Search Console. Отправка занимает две минуты, а Google быстрее узнаёт обо всех страницах сразу.
• Один запрос индексирования для главной и ключевых страниц. Число запросов в день ограничено, и повторные нажатия по одной странице ничего не ускоряют.

Что не помогает: платная «регистрация в сотнях поисковиков». Google сам предупреждает о таких предложениях: в его руководстве для владельцев сайтов письма «ваш сайт не зарегистрирован в крупных поисковых системах» стоят в одном ряду с другими сомнительными рассылками, а обещания «приоритетной регистрации» в Google названы поводом насторожиться (Google Search Central). Подать сайт в Google можно самому и бесплатно через Search Console, остальное Google находит по ссылкам.

Если сайт в индексе, но далеко

Откройте в Search Console отчёт об эффективности (пункт «Эффективность» в меню слева; если он раскрывается, то «Результаты поиска»). Вкладка «Запросы» под графиком покажет, по каким словам вас уже видели. Чтобы понять, насколько далеко, нажмите над графиком на плашку «Средняя позиция»: по умолчанию она выключена. Если показов почти нет, Google пока не считает страницу хорошим ответом ни на один запрос.

Молодой сайт без ссылок не выйдет в топ по запросу «плиточник Ницца» за неделю. По названию своей фирмы он обычно находится быстро, а по общим запросам конкурирует с сайтами, которые работают годами. Помогают понятные страницы под каждую услугу, текст, который отвечает на вопрос клиента, и время. С чего начать проверку самой страницы, я разбирал в статье Как проверить базовое SEO страницы, здесь повторять не буду.

Короткий чеклист

• site:vashdomen.fr в Google, Безопасный поиск выключен.
• Search Console подключён, главная проверена через «Проверку URL».
• В отчёте «Страницы» нет noindex и robots.txt у главной, услуг и контактов.
• WordPress: «Настройки» > «Чтение», галочка снята.
• Заглушка выключена, пароль на сайте снят.
• Sitemap отправлен, статус «Успешно».
• Есть хотя бы несколько внешних ссылок: Google Maps, соцсети, справочники.

Где лучше остановиться

Всё, что выше, делается без кода и ничего не ломает. Дальше начинаются вещи, где новичку проще не тратить вечер: noindex приходит не из Yoast, а из темы или заголовка сервера, robots.txt генерирует плагин и правка не сохраняется, дубли появились после переезда на https или смены домена, сотни страниц висят в «Обнаружена, не проиндексирована». Здесь нужно смотреть сайт целиком, а не одну галочку. Если в Search Console есть сообщения в отчётах о мерах, принятых вручную, или о проблемах безопасности, это тоже не вечерняя задача: сайт могли взломать.

Если время дороже

Пройти эту диагностику можно самому, и после неё вы будете точно знать, в какой из двух ситуаций ваш сайт.

Если не хочется разбираться в отчётах, пришлите ссылку на бесплатный аудит сайта: за один рабочий день я посмотрю индексацию, sitemap и базовое SEO снаружи, без доступов, и отвечу коротким списком, что критично, а что можно не трогать. Если нужно обсудить, как сайту расти в поиске дальше, для этого есть стартовая консультация.