Как проиндексировать новый сайт в Google

Чтобы проиндексировать новый сайт, подтвердите его в Google Search Console, отправьте XML-карту сайта, убедитесь, что robots.txt и мета-теги не запрещают сканирование, сошлитесь на каждую важную страницу с главной или из меню, получите несколько настоящих ссылок с сайтов, которые Google уже сканирует, и запросите сканирование ключевых страниц. Начинайте с небольшого набора сильных страниц, а не с тысяч сразу.

Шаг 1: убедитесь, что Google ничто не мешает

Новые сайты часто запускаются с оставшимися настройками тестового сервера. Проверьте это раньше всего остального:

• robots.txt не содержит Disallow: / для всех роботов.
• Нет noindex на весь сайт ни в meta robots, ни в заголовке X-Robots-Tag. Во многих CMS есть переключатель «попросить поисковые системы не индексировать сайт».
• Нет пароля и ограничений по IP, оставшихся с разработки.
• Canonical указывает на рабочий домен, а не на тестовый хост.
• Одна версия домена (https, с www или без) и редиректы со всех остальных.

Наш бесплатный чекер проверяет код ответа, редиректы, noindex, robots.txt и canonical для 10 адресов сразу.

Шаг 2: подключите Search Console

1. Добавьте сайт как ресурс на уровне домена и подтвердите через DNS.
2. Отправьте XML-карту сайта в разделе «Файлы Sitemap».
3. Проверьте главную в «Проверке URL» и запросите индексирование.
4. Через несколько дней вернитесь посмотреть охват и ошибки.

Шаг 3: соберите sitemap, которой Google будет доверять

• Только канонические индексируемые адреса с кодом 200.
• Точные даты lastmod. Не меняйте их, если ничего не изменилось.
• По мере роста делите карту по типам (статьи, товары, категории), чтобы легко находить проблемы.
• Укажите её в robots.txt строкой Sitemap:.

Подробнее в гайде о том, как отправить sitemap в Google.

Шаг 4: перелинкуйте всё важное

Google находит страницы, переходя по ссылкам. На новом сайте до каждой важной страницы должно быть два-три клика от главной. Используйте главное меню, страницы разделов и ссылки между связанными статьями. Страницы-сироты, до которых можно добраться только через sitemap, сканируются в последнюю очередь.

Шаг 5: получите первые внешние ссылки

Несколько ссылок с сайтов, которые Google уже сканирует, сильно влияют на то, как быстро новый домен обнаружат и как часто будут посещать. Хорошие ранние источники:

• Ваши другие проекты или страницы компании.
• Профили компании и тематические каталоги, не закрытые noindex.
• Гостевая статья или интервью на сайте вашей ниши.
• Партнёры, поставщики или клиенты, которые могут вас упомянуть.

Эти страницы тоже должны быть в индексе. Проверьте их и, если их не сканируют, запросите это. Как именно, в гайде о том, как проиндексировать обратные ссылки.

Шаг 6: публикуйте в темпе, который сайт выдерживает

Новым доменам выделяется небольшой краулинговый бюджет. Запуск с десятью тысячами тонких страниц означает, что большая их часть будет ждать в «Обнаружена, не проиндексирована». Запускайтесь с самыми сильными страницами и дальше публикуйте равномерно. Качество в начале влияет и на то, как Google будет относиться к остальному сайту позже.

Шаг 7: запросите сканирование ключевых страниц

Для главной и нескольких основных страниц используйте «Проверку URL». Для остальной стартовой пачки время сэкономит сервис индексации. @IndexForgeBot принимает целую sitemap или просто домен, проверяет каждую страницу и отправляет индексируемые по $0.01 за штуку. Обычно они попадают в индекс за 1–3 дня.

Ошибки, из-за которых новые сайты не в индексе

Что публиковать первым

О новом сайте судят по тому, что Google видит первым. Запускайтесь со страницами, которые лучше всего представляют сайт: главная, основные разделы или услуги и несколько действительно полезных статей. Пятьдесят сильных страниц производят лучшее первое впечатление, чем пять тысяч тонких.

План перелинковки для нового сайта

• Главная ссылается на каждый основной раздел.
• Каждый раздел ссылается на свои самые важные страницы.
• Каждая статья ссылается на две-три связанные.
• Ни одна важная страница не дальше трёх кликов от главной.
• Хлебные крошки на каждой странице ведут вверх по структуре.

Как читать первые недели в Search Console

Хостинг: что важно для сканирования

Googlebot сбавляет темп, когда сервер медленный или отдаёт ошибки. На новом сайте это может полностью остановить индексацию. Убедитесь, что страницы отвечают быстро, сервер не отдаёт 5xx при небольшой нагрузке, а средства защиты не подсовывают Googlebot капчи и JavaScript-проверки.

Если через месяц сайт всё ещё не в индексе

1. Проверьте главную. Если она не в индексе, сначала ищите блокирующую настройку.
2. Проверьте «Проблемы безопасности и меры, принятые вручную» в Search Console.
3. Честно посмотрите на контент: отличается ли он от того, что уже есть в поиске?
4. Получите несколько настоящих ссылок с сайтов вашей ниши и снова запросите сканирование.

Домены с историей

Домен с историей приходит со своим прошлым: старыми обратными ссылками, старыми проиндексированными адресами, а иногда и проблемами. Посмотрите, что на нём было раньше. Если старые адреса теперь отдают 404, это нормально. Если домен использовали для спама, ждите, что Google некоторое время будет осторожен, и проверьте «Проблемы безопасности и меры, принятые вручную» в Search Console.

Новые сайты на нескольких языках

Запускайте каждую языковую версию с настоящим переведённым контентом, настройте hreflang между версиями и сделайте canonical каждой версии указывающим на неё саму. Машинный перевод почти без вычитки частая причина, по которой один язык индексируется, а остальные нет.

Чек-лист на день запуска

• robots.txt разрешает сканирование и указывает sitemap
• Нет noindex на страницах, которые должны быть в поиске
• Все версии домена перенаправляют на одну
• Canonical указывает на рабочий домен
• Sitemap отправлена в Search Console
• Главная проверена, индексирование запрошено
• Основные разделы доступны по ссылкам с главной

Как новый сайт зарабатывает частоту сканирования

Новый домен Google сканирует осторожно и увеличивает темп, когда понимает, что сайт стоит посещать: страницы быстро отвечают, контент обновляется, появляются ссылки, а просканированные страницы оказываются полезными. Публикация по ровному графику, с ссылкой на каждую новую страницу с главной или из рубрики, приучает к этому быстрее, чем один большой запуск и тишина после него.

На практике первый месяц уходит на то, чтобы заработать доверие небольшим набором сильных страниц. Расширяться стоит, когда Google уже заходит регулярно.

Что измерять в первый месяц

• Число проиндексированных страниц в отчёте «Индексирование страниц», по неделям.
• Запросы на сканирование в день в «Статистике сканирования».
• Время от публикации до индексации для каждой новой страницы.
• Показы в отчёте «Эффективность», которые появляются раньше кликов.

Какие страницы отправить на сканирование первыми

Запрашивать сканирование для каждой страницы нового сайта не нужно. Начните с главной, основных разделов или страниц услуг и двух-трёх самых сильных статей. Именно они ссылаются на всё остальное, поэтому, просканировав их, Google найдёт остальное по внутренним ссылкам и через sitemap. Запрос сканирования для сотен тонких страниц в первый день не помогает и может выставить сайт больше и слабее, чем он есть.

Реалистичный первый месяц

Сайты с одной-двумя хорошими первыми внешними ссылками обычно двигаются быстрее. Сайты с множеством тонких страниц обычно медленнее.

Контент, который помогает новому сайту попасть в индекс

Страницы, которые отвечают на конкретный вопрос лучше того, что уже в выдаче, дают Google причину их хранить. Новый сайт с десятью такими страницами обычно индексируется полнее, чем сайт с сотней коротких страниц на пересекающиеся темы. Пишите меньше страниц, делайте каждую полной и связывайте их ссылками по темам, чтобы Google видел понятную структуру.

Не публикуйте при запуске страницы-заглушки, пустые категории и разделы «скоро здесь будет». Обычно они оказываются ложными 404 или в статусе «просканирована, но не проиндексирована» и делают сайт тоньше, чем он есть.

Частые вопросы

Сколько индексируется новый сайт?

Главную часто индексируют за несколько дней после отправки в Search Console. Глубокие страницы дольше, от дней до недель, в зависимости от ссылок и контента.

Нужны ли обратные ссылки, чтобы попасть в индекс?

Нет, но несколько ссылок помогают новому сайту быстрее найтись и чаще сканироваться.

Почему в индексе только главная?

Обычно потому, что на другие страницы плохо ссылаются или Google их ещё не просканировал. Усильте внутренние ссылки и запросите сканирование важных страниц.

Отправлять ли каждую страницу через «Проверку URL»?

Только самые важные. Дневная квота небольшая. Остальное покроют sitemap и внутренние ссылки.

Как добавить сайт в Google?

Подтвердите сайт в Google Search Console, отправьте sitemap и запросите индексирование главной в «Проверке URL». Отдельной кнопки «добавить сайт в поиск» нет: Google находит сайты по ссылкам и картам сайта.

Как проиндексировать сайт в Google бесплатно?

Search Console, sitemap, внутренние ссылки и несколько внешних ссылок бесплатны и покрывают большинство случаев. Платный сервис полезен, когда страниц много и ждать нельзя. В Index Forge на старте 10 бесплатных кредитов.

Можно ли отправить в индекс весь новый сайт сразу?

Да: пришлите боту домен или sitemap. Он заберёт все страницы, проверит каждую и покажет, сколько можно отправить. До 10 000 адресов за одну отправку, $0.01 за прошедший.

Почему новый сайт есть в Яндексе, но нет в Google?

Поисковики сканируют независимо. Для Google подтвердите сайт в Search Console, отправьте sitemap, проверьте главную в «Проверке URL» и убедитесь, что robots.txt и noindex не мешают.