Проиндексировать сайт в гугле: 10 действенных способов заставить Google индексировать ваш сайт

Содержание

10 действенных способов заставить Google индексировать ваш сайт

Если ваш сайт не индексируется Google, то он практически невидим. Он не будет попадать в результаты поиска и получать естественный трафик. Совсем. Вообще. Ничего.

Если вы читаете эту статью, то это вам уже и так известно. Так что перейдем сразу к делу.

Эта статья поможет вам решить три проблемы:

  1. Ваш сайт вообще не индексируется.
  2. Часть страниц сайта индексируется, а часть — нет.
  3. Свежеопубликованные статьи индексируются недостаточно быстро.

Но сперва давайте убедимся, что мы имеем в виду одно и то же, когда говорим об «индексировании».

Что такое краулинг и индексирование?

Google находит новые страницы при помощи паука, который ползает по Всемирной паутине («краулинг» дословно означает «ползание») и добавляет страницы в свою базу данных — индекс. Этот паук называется поисковым роботом, а у робота Google есть собственное имя — Гуглбот (Googlebot).

Запутались? Давайте дадим определения основным терминам.

  • Краулинг — процесс перехода по гиперссылкам в Интернете с целью нахождения нового контента.
  • Индексирование — процесс сохранения каждой веб-страницы в обширной базе данных.
  • Поисковый робот — Программа, которая выполняет краулинг.
  • Googlebot — поисковый робот Google.

Вот видео от Google, в котором этот процесс подробно объясняется:

Когда вы ищете что-то в поисковике Google, он выдает все релевантные страницы из своей базы данных — индекса. Поскольку часто запросу могут соответствовать миллионы страниц, алгоритм ранжирования Google делает все возможное, чтобы отсортировать их так, чтобы первыми шли страницы, которые лучше всего отвечают запросу.

Тут важно понимать, что индексирование и ранжирование — это совершенно разные вещи.

Индексирование — это регистрация на участие в гонке, а ранжирование — это распределение призовых мест.

Нельзя победить в гонке, не зарегистрировавшись сперва.

Как узнать, есть ли ваш сайт в индексе Google

Откройте сайт Google и введите в поиск site:ваш_сайт.com

Это число примерно показывает, сколько страниц вашего сайта содержится в индексе Google.

Если вы хотите узнать состояние индексирования конкретного URL-адреса, используйте тот же самый оператор site:ваш_сайт.com/адрес_страницы.

Если результатов не будет, значит, страницы нет в индексе.

Стоит заметить, что если вы пользуетесь Google Search Console, то можете воспользоваться отчетом «Покрытие», чтобы получить более точные сведения о состоянии индексирования вашего сайта. Просто перейдите в раздел:

Google Search Console > Индексирование > Покрытие

Посмотрите на число действительных страниц (с предупреждениями и без).

Если эти числа в сумме отличаются от нуля, значит, по крайней мере часть страниц вашего сайта содержится в индексе Google. Если же оба числа равны нулю, то у вас серьезная проблема, поскольку ни одна страница сайта не проиндексирована.

Примечание.

 Вы не пользуетесь Google Search Console? Зарегистрируйтесь. Это бесплатно. Каждый владелец сайта, которого заботит поисковый трафик, должен использовать Google Search Console. Да, настолько это важно. 

В Search Console можно также проверить, проиндексирована ли конкретная страница. Для этого вставьте ее URL-адрес в Инструмент проверки URL.

Если страница проиндексирована, то сервис выдаст сообщение «URL есть в индексе Google».

Если нет — то «URL нет в индексе Google».

Как сделать так, чтобы Google индексировал ваш сайт

Обнаружили, что Google не индексирует ваш сайт или страницу? Попробуйте следующее:

  1. Откройте Google Search Console.
  2. Перейдите в Инструмент проверки URL.
  3. Вставьте в строку поиска URL-адрес, который вы хотите видеть в индексе Google.
  4. Подождите, пока Google проверит адрес.
  5. Нажмите кнопку «Запросить индексирование».

Это полезно делать, когда вы публикуете новую статью или страницу. Так вы напрямую сообщаете Google о том, что добавили что-то новое на свой сайт и что поисковику следует взглянуть на это.

Однако непосредственный запрос не поможет решить глубинные проблемы, которые препятствуют индексированию старых страниц. Если это ваш случай, то пройдитесь по приведенному ниже списку, чтобы диагностировать и решить проблему.

Вот ссылки на каждую тактику — на случай, если вы пробовали часть из них:

  1. Удалите блокирующие условия из файла robots.txt
  2. Удалите шальные теги noindex
  3. Добавьте адрес страницы в файл sitemap
  4. Удалите шальные теги canonical
  5. Проверьте, не является ли страница сиротой
  6. Почините внутренние nofollow-ссылки
  7. Добавьте «сильные» внутренние ссылки
  8. Убедитесь, что страница уникальна и обладает ценностью
  9. Удалите некачественные страницы (чтобы оптимизировать «краулинговый бюджет»)
  10. Получите качественные обратные ссылки

 

1) Удалите блокирующие условия из файла robots.

txt

Google не индексирует весь ваш сайт? Причиной может быть блокирующее условие в файле robots.txt.

Чтобы проверить эту возможность, перейдите по адресу ваш_сайт.com/robots.txt.

Посмотрите, нет ли в тексте одного из этих фрагментов:

User-agent: Googlebot</p>
<p>Disallow: / 
User-agent: *</p>
<p>Disallow: / 

Оба этих фрагмента сообщают Гуглботу, что ему нельзя сканировать страницы вашего сайта. Чтобы исправить проблему, просто удалите их. И всё.

Блокирующее условие в файле robots.txt может быть виновным и в том случае, когда Google не индексирует отдельную страницу. Чтобы проверить этот вариант, вставьте адрес страницы в Инструмент проверки URL в Google Search Console. Откройте раздел «Покрытие» и поищите ошибку «Сканирование разрешено? Нет: заблокировано через robots.txt».

Эта ошибка указывает на то, что страница заблокирована в файле robots.txt.

В таком случае поищите в файле robots.

txt любые правила «disallow», относящиеся к странице или содержащему ее подкаталогу.

Важная страница заблокирована для индексирования в файле robots.txt.

Если нужно, удалите эти правила.

2) Удалите шальные теги noindex

Google не станет индексировать страницы, если попросить об этом. Так вы можете оградить некоторые страницы от публичного доступа. Есть два способа сделать это:

Способ 1: тег meta

Страницы с одним из этих тегов meta в секции <head> не индексируются Google:

&amp;lt;meta name=“robots” content=“noindex”&amp;gt;
&amp;lt;meta name=“googlebot” content=“noindex”&amp;gt;

Это мета-тег robots, который сообщает поисковым системам, следует ли им индексировать данную страницу.

Примечание.

 Главная часть — это значение “noindex”. Если вы видите его, значит, страница помечена как неиндексируемая.

Чтобы найти на своем сайте все страницы с мета-тегом noindex, запустите сканирование в сервисе Site Audit от Ahrefs. Перейдите в отчет Indexability  («Индексируемость»). Поищите предупреждения «Noindex page» («Неиндексируемая страница»).

Нажмите на одно из них, чтобы увидеть все такие страницы. Удалите мета-тег noindex со всех страниц, где он не нужен.

Способ 2: X‑Robots-Tag

Поисковые роботы также учитывают заголовок HTTP-ответа X‑Robots-Tag. Вы можете реализовать его на скриптовом языке для серверной стороны типа PHP, через файл .htaccess file или через изменение конфигурации своего сервера.

Инструмент проверки URL в Search Console позволяет узнать, блокирует ли Google сканирование страницы из-за заголовка. Просто введите свой URL-адрес, а затем поищите ошибку «Индексирование разрешено? Нет: обнаружено значение ‘noindex’ в HTTP-заголовке X‑Robots-Tag».

Если вы хотите исправить эту проблему на своем сайте, запустите сканирование в сервисе Site Audit от Ahrefs, а затем примените фильтр «Robots information in HTTP header» («Информация для роботов в заголовке HTTP») в разделе Page Explorer:

Попросите своего разработчика исключить страницы, которые нужно индексировать, из числа тех, что возвращают такой заголовок

Рекомендуем прочесть: Использование HTTP-заголовка X‑Robots-Tag для поисковой оптимизации: Секреты и хитрости

 

3) Добавьте адрес страницы в файл sitemap

Файл sitemap сообщает Google, какие страницы вашего сайта важны, а какие нет. Также он может рекомендовать, как часто следует повторно сканировать определенные страницы.

Google способен находить страницы на вашем сайте независимо от того, представлены ли они в файле sitemap, но хорошей практикой является указание важных страниц. В конце концов, нет смысла усложнять работу Google.

Чтобы проверить, указана ли страница в файле sitemap, используйте Инструмент проверки URL в Search Console. Если вы увидите ошибку «URL нет в индексе Google» и «Sitemap: н/д», значит, страницы нет в файле sitemap или индексе.

Не пользуетесь Search Console? Перейдите по URL-адресу своего файла sitemap — обычно этоваш_сайт.com/sitemap.xml — и поищите адрес страницы.

Либо, если вы хотите найти все сканируемые и индексируемые страницы, которых нет в файле sitemap, запустите сканирование в сервисе Site Audit от Ahrefs. Перейдите в Page Explorer и примените следующие фильтры:

Вы получите список страниц, которые следует добавить в файл sitemap. Когда вы это сделаете, сообщите Google о том, что вы обновили свой файл sitemap, перейдя по этому URL:

http://www.google.com/ping?sitemap=<полный_URL_адрес_файла_sitemap>

Только подставьте туда URL-адрес своего файла sitemap. Вы увидите что-то подобное:

Это должно ускорить индексирование страницы поисковой системой.

 

4) Удалите шальные теги canonical

Тег каноничности (тег canonical) сообщает Google о канонической версии страницы. Выглядит он так:

<link rel=“canonical” href=“/страница.html”/>

Большая часть страниц либо не имеют тега canonical, либо содержат так называемый автореферентный тег canonical. Он сообщает поисковой системе о том, что страница сама является канонической, а возможно, и единственной версией. Другими словами, вы хотите, чтобы эта страница индексировалась.

Но если на страницу затесался шальной тег canonical, он может направить Google на каноническую версию страницы, которая на самом деле не существует. В таком случае страница не будет проиндексирована.

Чтобы проверить такую возможность, воспользуйтесь Инструментом проверки URL от Google. Если тег каноничности указывает на другую страницу, то вы увидите предупреждение «Альтернативная каноническая страница».

Если такого быть не должно, и вы хотите, чтобы страница индексировалась, удалите тег каноничности.

ВАЖНО

Имейте в виду, что теги каноничности не всегда плохи. Чаще всего они добавляются не просто так. Если вы видите, что ваша страница содержит такой тег, проверьте страницу, которая указана как каноническая. Если окажется, что это и правда приоритетная версия страницы, которую нужно индексировать, то тег canonical следует оставить.

Если вы хотите быстро найти все шальные теги canonical на своем сайте, запустите сканирование в сервисе Site Audit от Ahrefs. Перейдите в раздел Page Explorer. Используйте такие настройки:

Они запустят поиск страниц в файле sitemap с неавтореферентными тегами каноничности. Если поиск с этим фильтром выдаст какие-либо результаты, вам следует разобраться с ними, поскольку вы наверняка хотели бы, чтобы эти страницы индексировались.

Высока вероятность того, что эти страницы либо содержат ошибочные теги каноничности, либо наоборот — не должны находиться в файле sitemap.

 

5) Проверьте, не является ли страница сиротой

Страницы-сироты — это такие страницы, на которые не ведет ни одной внутренней ссылки.

Поскольку Google находит новый контент, перемещаясь по Всемирной паутине от одной страницы к другой, он не может найти таким образом страницы-сироты. Точно так же их не смогут найти посетители сайта.

Чтобы найти страницы-сироты, просканируйте свой сайт при помощи сервиса Site Audit от Ahrefs. Затем откройте отчет Incoming links (Входящие ссылки) для ошибок «Orphan page (has no incoming internal links)» («Страница-сирота (не имеет входящих ссылок)»):

В нем показаны все индексируемые страницы, указанные в файле sitemap, на которые при этом не ведет ни одна внутренняя ссылка.

ВАЖНО

Чтобы это сработало, должны быть выполнены два условия:

  1. Все страницы, которые вы хотите видеть индексированными, указаны в вашем файле sitemap.
  2. При создании проекта в сервисе Site Audit от Ahrefs вы поставили галочку «Использовать страницы в файлах sitemap как исходные пункты для сканирования».

Вы не уверены, что все страницы, которые вы хотите видеть индексированными, указаны в файле sitemap? Попробуйте следующее:

  1. Загрузите полный список страниц вашего сайта (через систему CMS).
  2. Просканируйте сайт (при помощи Site Audit от Ahrefs или подобного сервиса).
  3. Сравните полученные списки URL-адресов.

Все адреса, не найденные в процессе сканирования, принадлежат страницам-сиротам.

Вы можете решить проблему страниц-сирот двумя способами:

  1. Если страница не важна, удалите ее и уберите из файла sitemap.
  2. Если страница важна, добавьте ее в схему внутренних ссылок сайта.

 

6) Почините внутренние nofollow-ссылки

Nofollow-ссылки — это ссылки с тегом rel=“nofollow”. Они препятствуют передаче показателя PageRank целевому URL-адресу. К тому же, Google не сканирует nofollow-ссылки.

Вот что об этом заявляют в Google:

По сути, использование атрибута nofollow заставляет Google не включать целевые ссылки в общий граф сети. Тем не менее, целевые страницы все равно могут попасть в наш индекс, если на других сайтах встретятся ссылки на них без атрибута nofollow либо если URL-адреса будут указаны в файле Sitemap.

Короче говоря, вам нужно убедиться, что внутренние ссылки на индексируемые страницы не должны иметь атрибута nofollow.

Для этого просканируйте свой сайт при помощи Site Audit от Ahrefs. В отчете Incoming links (Входящие ссылки) поищите индексируемые страницы с ошибками «Page has nofollow incoming internal links only» («На страницу ведут только внутренние nofollow-ссылки»):

Удалите атрибут nofollow из внутренних ссылок, если вы хотите, чтобы Google индексировал страницы, на которые они ведут. Если нет, то удалите страницы либо пометьте их тегом noindex.

Рекомендуем прочесть: Что такое nofollow-ссылки? Все, что вам нужно знать (без жаргона!)

 

7) Добавьте «сильные» внутренние ссылки

Google находит новый контент, сканируя ваш сайт. Если вы пренебрегаете созданием внутренних ссылок, то поисковик может и не найти некоторые страницы.

Одно из простых решений этой проблемы — добавить несколько внутренних ссылок, ведущих на нужную страницу. Разместить ссылки можно на любых других страницах, которые Google может сканировать и индексировать. Но если вы хотите, чтобы Google проиндексировал целевой контент как можно быстрее, то лучше всего разместить ссылку на одной из самых «сильных» страниц.

Почему? Потому что Google сканирует такие страницы чаще.

Для этого перейдите в Site Explorer от Ahrefs, введите адрес своего сайта, а затем откройте отчет Best by links (Лучшие по ссылкам).

В нем будут перечислены все страницы вашего сайта, отсортированные по показателю URL Rating (UR). Другими словами, он показывает первыми самые авторитетные страницы.

Пролистайте этот список, чтобы найти подходящие страницы, куда можно добавить внутренние ссылки на интересующую страницу.

Например, если мы хотим добавить внутреннюю ссылку на руководство по гостевому постингу, то руководство по линкбилдингу вполне подойдет для этого. Последняя страница очень кстати оказывается 11‑й по авторитетности в нашем блоге:

В следующий раз, когда Google будет сканировать эту страницу, он обнаружит новую ссылку и перейдет по ней.

СОВЕТ

Вставьте адрес страницы, на которой вы разместили внутреннюю ссылку, в Инструмент проверки URL от Google. Нажмите «Запросить индексирование», чтобы сообщить поисковой системе о том, что содержание страницы изменилось, и ее следует отсканировать заново. Это может ускорить процесс нахождения и индексирования той страницы, на которую ведет ссылка.

 

8) Убедитесь, что страница уникальна и обладает ценностью

Google, как правило, не индексирует некачественные страницы, которые не представляют ценности для пользователей. Вот что Джон Мюллер из Google говорил об индексировании в 2018 году:

Мы не индексируем все существующие URL-адреса, и это нормально. Сосредоточьтесь на том, чтобы делать сайт замечательным и вдохновляющим, и тогда у вас не будет проблем с индексированием.

—  John  (@JohnMu) January 3, 2018

То есть, если вы хотите, чтобы Google проиндексировал ваш сайт или страницу, их содержание должно быть «замечательным и вдохновляющим».

Если вы не находите технических причин отсутствия индексирования, возможно, виновником является отсутствие ценности. Поэтому нелишне будет взглянуть на страницу свежим взглядом и спросить себя, действительно ли эта страница имеет ценность и принесет ли она пользу тому, кто перейдет на нее из результатов поиска.

Если ответом будет «нет», значит, вам следует улучшить свой контент.

Вы можете использовать Site Audit от Ahrefs и URL Profiler, чтобы найти другие потенциально некачественные страницы, которые не индексируются. Для этого перейдите в раздел Page Explorer в Site Audit и установите такие настройки:

Так вы получите «слабые» страницы — индексируемые, но не приносящие в данный момент естественного трафика. Высока вероятность того, что они не проиндексированы.

Экспортируйте отчет, а затем вставьте все URL-адреса в URL Profiler и запустите проверку Google Indexation (Индексирование в Google).

Источник: https://urlprofiler.com/blog/google-indexation-checker-tutorial/

ВАЖНО

Если вы выполняете эту проверку для большого числа страниц (больше 100), то рекомендуется использовать прокси. Иначе вы рискуете тем, что Google забанит ваш IP-адрес. Если вариант с прокси не подходит, то введите в поиск Google «массовая проверка индексации в google бесплатно». Есть целый ряд инструментов, но в большинстве из них нельзя проверить более 25 страниц за раз.

Проверьте качество страниц, которые не индексируются. Улучшите качество, где это необходимо, и запросите индексирование в Google Search Console.

Также следует проверить возможность дублирования контента. Google старается не индексировать страницы-копии и очень похожие страницы. Загляните в отчет Content quality (Качество контента) в сервисе Site Audit, чтобы проверить этот вариант.

 

9) Удалите некачественные страницы (чтобы оптимизировать «краулинговый бюджет»)

Слишком большое число некачественных страниц на сайте приводит к пустой трате краулингового бюджета.

Вот что об этом говорят в Google:

[Страницы-с-низкой-ценностью] отвлекают на себя активность сканирования от страниц, которую действительно имеют ценность, что способно приводить к значительным задержкам в обнаружении хорошего контента на сайте.

Представьте, что учитель проверяет сочинения, одно из которых — ваше. Если ему нужно оценить десять сочинений, то он довольно быстро доберется до вашего. Если сочинений будет сто, то ему потребуется гораздо больше времени. Если их будут тысячи, то нагрузка будет слишком высокой, и учитель может вообще никогда не добраться до оценки вашего сочинения.

В Google заявляют, что «краулинговый бюджет […] — это не то, о чем большинству стоит беспокоиться», и что «если на сайте меньше нескольких тысяч адресов, то большую часть времени он будет сканироваться эффективно».

Тем не менее, удаление некачественных страниц с вашего сайта никогда не повредит. Это только пойдет на пользу краулинговому бюджету.

Вы можете использовать наш шаблон аудита контента, чтобы найти потенциально некачественные и нерелевантные страницы, которые можно удалить.

 

10) Получите качественные обратные ссылки

Обратные ссылки сообщают Google о том, что страница, на которую они ведут, важна. Раз кто-то дает на нее ссылку, значит, у нее должна быть некая ценность, верно? Поэтому Google индексирует страницы с обратными ссылками.

Для полной прозрачности Google индексирует не только страницы, имеющие обратные ссылки. Есть множество (миллиарды) проиндексированных страниц без обратных ссылок. Но поскольку Google считает страницы с качественными ссылками более важными, поисковик будет быстрее и чаще сканировать такие страницы, чем те, у которых нет обратных ссылок. То есть, индексирование страниц с качественными обратными ссылками происходит быстрее.

В нашем блоге есть много материалов по созданию качественных обратных ссылок.

Ниже приведены ссылки на некоторые из них.

Индексирование и ранжирование — это разные вещи

Наличие вашего сайта в индексе Google не означает, что он будет попадать в выдачу и приносить трафик.

Это разные вещи.

Индексирование означает только то, что Google известно о существовании вашего сайта. Это не означает, что ваш сайт будет показан в топе выдачи по подходящим запросам.

Тут-то и вступает в дело SEO — искусство оптимизации веб-страниц для попадания в топ выдачи по определенным запросам.

В общих чертах поисковая оптимизация (SEO) включает в себя:

  • Определение тем, которые ищут ваши клиенты.
  • Создание контента на эти темы.
  • Оптимизацию созданных страниц под целевые ключевые фразы.
  • Наращивание обратных ссылок.
  • Постоянное поддержание контента в актуальном состоянии.

Вот видео, которое поможет разобраться в основах SEO:

…И несколько статей:

Напоследок

Есть только две возможные причины, почему Google не индексирует ваш сайт или веб-страницу:

  1. Технические проблемы, которые не дают поисковому роботу сделать это.
  2. Качество контента — Google считает ваш сайт или страницу некачественными и бесполезными для своих пользователей.

Вполне возможно, что имеют место обе эти проблемы. Но, по моему опыту, технические проблемы встречаются гораздо чаще. Технические проблемы также могут стать причиной автоматического создания индексируемого некачественного контента (например, проблемы с фасетной навигацией). Это нехорошо.

Но проход по приведенному выше списку в девяти случаях из десяти должен решить проблемы индексирования.

Только не забывайте, что индексирование и ранжирование — это разные вещи. Выполнение поисковой оптимизации по-прежнему жизненно необходимо, если вы хотите вывести свои страницы в топ выдачи по подходящим поисковым запросам и привлечь стабильный поток естественного трафика.

Перевела Кирик Наталья, владелец студии по написанию текстов для сайтов WordFactory.ua

8 советов, как проиндексировать сайт в Google

Каждый мечтает увидеть свой сайт на первой странице Google поиска, а в идеале даже вверху списка. Не имеет значение деятельность сайта: сам факт пребывания так высоко при ранжировании дает широкие возможности для дальнейшего развития.


Попасть на первую страницу Google поиска сложнейшая задача. Есть шаги, которые вы обязаны выполнить, чтобы иметь потенциальный шанс забраться на главные поисковые страницы. Мы опишем 8 главных советов, которые могут, если и не гарантировать,

то приблизить вероятность высокой индексации вашего сайта в Google. Представьте, что действие – это кубик. И если с одним кубиком ничего крутого построить не удастся, то все пройденные шаги создадут вам сильную платформу для прогресса.

🏢 1. Качественный хостинг – фундамент для высоких мест в поисковике

Алгоритмы Google проверяют стабильность работы вашего сайта: ресурс, который медленно загружается или страдает от множества ошибок, попадет под красный восклицательный знак машинных алгоритмов, тем самым исключая возможность высоких позиций во всеобщем списке сайтов.

Качественный хостинг будет гарантировать плавный и эффективный  рабочий процесс. В результате, аналитические мощности, рассматривая ваш сайт, отметят его стабильным и надежным. Но надежный хостинг – это не только стабильное подключение, а совокупность и других ключевых факторов, таких как профессиональная техническая поддержка в режиме 24/7. С HostPro вы можете на это рассчитывать.

Хороший хостинг – это отличный старт. Но каким должен быть следующий шаг, чтобы двигаться к своей главной цели?

🔐 2. Установите SSL сертификат

Безопасность в интернете имеет фундаментальное значение, об этом раз за разом напоминает нам Google. Вы никогда не сможете подняться вверх по лестнице поиска, если будете подвергать своих посетителей опасности и игнорировать небезопасное подключение. Решить этот вопрос сможет сертификат – бесплатный SSL сертификат, дешевый SSL, сертификат с поддоменами или любой другой. Сделайте подключение на страницах вашего ресурса надежным и продемонстрируйте это и своим пользователям, и поисковым алгоритмам.

Сайты, работающие по HTTPS протоколу, ранжируются приоритетнее тех, которые продолжают подключение по HTTP.

📝 3. Создавайте отличный контент

Большинство сайтов создают блоги, где делятся мыслями, новостями и различными советами. Создавая отличный контент, вы предоставляете своим посетителям материал для чтения, а поисковикам возможность схватиться за определенные фразы, темы или запросы. Пользователи увидят интересный и познавательный текст, а алгоритмы обратят внимание на актуальность.

Всех интересует читабельный, интересный и лаконичный текст, а не машинный набор слов.

Подумайте, как можно связать серию интересных статей о вашей деятельности, вписав в текста ключевые запросы по темам, в которых хотите добиться высоких показателей. Важно понять, что переспам ключевых фраз не несет никакой пользы, а поисковик такой материал проигнорирует.

👌 4. Устанавливайте контакты с новыми площадками

На авторитет сайта влияет насколько другие ресурсы ссылаются на его страницы, расставляя гиперссылки. Сам процесс распространения и создания ссылок – еще один важный фактор, который стоит брать во внимание при раскрутке платформы. Наиболее действенными способами послужат поиски новых деловых партнеров, знакомства со сторонними компаниями, которые работают в близкой с вами, но не в той же сфере (сайту ресторана – магазин по продаже овощей, к примеру).

Анализаторы Google видят распространенные ссылки как доказательство, что вашему сайту доверяют сайты, а это значит, что и Google имеет основания для этого доверия. Чем авторитетнее будут сайты, оставляющие гиперссылки на ваши страницы, тем выше вероятность лучшей индексации.

🔎 5. Используйте Google Analytics

Google Analytics – хороший способ для отслеживания статистики вашего сайта в режиме реального времени. Благодаря этим инструментам можно увидеть статистику просмотра страниц, показатели отказов, самые популярные записи и многое другое. Если ваш сайт работает на WordPress, тогда дополнительно можно установить утилиту Monster Insights, получив прямой доступ к аналитической информации прямо из админки сайта.

После регистрации в Google Analytics в Google будет отправлено уведомление, что у вас есть веб-сайт, и его стоит просканировать. Это ускорит процесс сканирования.

👀 6. Чаще делитесь контентом

Если вы не занимаетесь публикацией контента со своих страниц в социальных сетях, то очень зря. Один из ключевых факторов, влияющий на определение рейтинга вашего сайта после индексации, зависит от социальных взаимодействий.

Но и здесь действует вышеописанное правило: не стоит создавать контент ради контента, пытайтесь делать то, о чем люди будут говорить и что захотят обсуждать. Если пользователи делятся вашими публикациями – это признак хорошего тона.

📌 7. Создайте карту сайта

Карта сайта – расположение всего контента на страницах ресурса. Когда сканер имеет доступ к такой карте, он может определить изменения и появление нового, что изменит положение индексации.

Существует множество плагинов, которые способны помочь в управлении и создании правильного контента. Одним из лучших плагинов в этом деле является Yoast SEO – он не только позволяет управлять всем SEO контентом, но и помогает оптимизировать, улучшить читабельность и создать карту сайта для Google.

🔩 8. Отправьте сайт на проверку вручную

Чтобы ускорить процесс индексации, можно отправить свой сайт отправить на проверку вручную. Инструменты Google для веб-мастеров предлагают целый спектр функций, которые можно использовать для улучшения позиций в поисковике. Вы узнаете как улучшить и усовершенствовать процесс индексации.

Google-инструменты бесплатны – в идеале каждый владелец бизнеса должен, как минимум, быть знаком с ними, улучшая индексирование, благодаря рычагам, которые предоставляет сама компания.


Чтобы вывести собственный сайт на первую страницу выдачи, требуется много кропотливой работы и креативных идей. Вы должны уметь сочетать технические умения c маркетологами, авторами статей и сео-специалистами, чтобы развиваться по нужным направлениям. По мере выполнения всех пунктов, а также периода времени, вы заметите позитивные изменения, с каждым разом преодолевая очередной барьер на пути к верхним позициям.

Этот процесс не будет быстрым, но весь органический трафик, который вы получите, находясь на главной странице поиска, будет стоить всей тяжелой работы.

Как быстро проиндексировать сайт в Google и Яндекс

Добро пожаловать на вебсайт Sitexpert (далее — «Вебсайт»). Выражения «мы», «нам», «наше», и Sitexpert относятся к Sitexpert и его собственникам. Выражение «Вы» относится к пользователю, который использует Вебсайт для получения информации о рейтинге своего сайта в Интернете. 

Используя этот Вебсайт в любой форме Вы подтверждаете, что обязуетесь соблюдать данные Правила. Если Вы не принимаете данные Правила — не используйте Вебсайт. Мы  оставляем за собой право в любое время, на наше усмотрение, менять или дополнять Правила без предварительного предупреждения, а Ваше последующее использование Вебсайта означает Ваше принятие Правил.

Данный Вебсайт позволяет Вам получить информацию о том на каком месте находится Ваш сайт в той или иной поисковой системе по тем запросам, которые Вы укажите. 

 

1. Использование Вебсайта

1.1. Используя данный Вебсайт, Вы подтверждаете что:

1.2. Вы достигли 18-летнего возраста.

1.3. У вас есть юридические  полномочия давать и принимать правовые обязательства.

1.4. Вы будете использовать этот Вебсайт согласно Правил.

1.5. Пользователь Вебсайта, размещая на Вебсайте информацию, добровольно предоставляет нам, а также третьим лицам, которые имеют доступ к этому Вебсайту, свое безусловное согласие на обработку своих персональных данных (которые содержатся в информации, собранной и/или размещаемой на Вебсайте и/или отправляемой другим Пользователям Вебайта).

1.6. Вы соглашаетесь с тем, что мы имеем право присылать на указанный Вами при регистрации  e-mail и/или мобильный телефон информационные сообщения в т.ч. и рекламного характера.

1.7. Вы соглашаетесь с тем, что мы предоставляем данные услуги на безоплатной основе и в любое время без Вашего согласия можем установить оплату.

1.8. Вы соглашаетесь с тем, что мы неограничены во времени по обработке и предоставлению отчета по Вашему запросу.

1.9. Вы соглашаетесь с тем, что данные полученные  по Вашему запросу могут быть неточными в связи с сбоями в работе поисковых систем на которых тестировался Ваш сайт.

 

2. Отказ от гарантий

Вы понимаете, следующее (за исключением случаев, которые запрещены законом):

2.1. Использование вами вебсайта и/или услуг осуществляется исключительно на ваш риск. Сайт и услуги предоставляются на условиях «как есть» и «как доступно». Мы отрицаем любого вида гарантии, включая, но не ограничиваясь, гарантиями товарности, пригодности для конкретной цели и неиспользования.

2.2. Мы не даем никаких гарантий, что:

a) вебсайт или услуги будут соответствовать вашим требованиям;

b) вебсайт или услуги будут предоставляться непрерывно, своевременно, безопасно, или без ошибок;

c) результаты, которые могут быть получены посредством использования вебсайта или услуг, будут точными и надежными;

d) качество любых продуктов, служб, информации или других материалов, полученных вами через вебсайт или услуги, будет соответствовать вашим ожиданиям, и

e) ошибки в программном обеспечении будут исправлены, или, что любая часть сайта будет без вирусов, червей, троянских коней и.т.д. ;

f) любой материал, загруженный или иным образом полученный посредством использования вебсайта или обслуживания, осуществляется на ваше собственное усмотрение и, что только вы будете нести ответственность за любой ущерб, нанесенный вашему компьютеру, или утерю данных в результате загрузки любых таких пользований;

g) никакая консультация или информация, письменная или устная, полученная вами от нас не предусматривает никаких гарантий, прямо не указанных в правилах.

3. Ограничение ответственности

3.1. Вы понимаете и согласны с тем, что sitexpert, ее должностные лица, директора, сотрудники, агенты, юристы, спонсоры, рекламодатели, филиалы, правопреемники («мы»), не являются ответственными за любые штрафные убытки, включая, но не ограничиваясь, убытками от потери прибыли, репутации, использования данных и других нематериальных убытков, в результате:

a) использования или невозможности использования вебсайта;
b) несанкционированного доступа или изменения ваших сообщений или данных;
c) заявлений любого третьего лица на вебсайте или услугах;
d) любых других вопросов, относящихся к вебсайту.

3.2. Если вы недовольны вебсайтом или нормами правил или у вас возникают еще какие-либо споры или разногласия с sitexpert, то вашим единственным и исключительным правом правовой защиты будет прекращение использование вебсайта.

4. Общая информация

4.1. Настоящие Правила являются соглашением между Вами и собственниками Sitexpert и регламентирует использование Вами Вебсайта, заменяя собой любые предыдущие соглашения между Вами и Sitexpert. На вас также могут распространяться дополнительные положения и условия, которые могут применяться при использовании сопутствующих услуг, содержания третьей стороны или программного обеспечения других производителей. Данные правила, а также  взаимоотношения между вами и Sitexpert регулируются законодательством Украины. Вы и Sitexpert соглашаетесь подчиняться личной и исключительной юрисдикции судов, расположенных по месту нахождения ответчика, если иное не предусмотрено законодательством Украины. Вы признаете, что Sitexpert вправе принимать правовые меры против Вас, если ваши действия нарушают данные Правила или идут в ущерб Sitexpert.

4.2. Вы подтверждаете, что Вы прочитали, поняли и соглашаетесь с данными Правилами.

5. Нарушения

Пожалуйста, сообщайте о любых нарушениях настоящих Правил нашей службе поддержки или по электронной почте.

Как заставить Google быстро индексировать ваш новый сайт [Руководство Blogger]

Опубликовано: 2020-11-06

Трафик с поисковых систем — ключ к созданию любого прибыльного блога. Но вот в чем дело: если Google не проиндексирует ваш сайт, вы НЕ получите ни одного посетителя.

Если вы хотите, чтобы Google оценивал ваши страницы, вам нужно сначала проиндексировать свой сайт. Если вы ищете, чтобы Google проиндексировал ваш новый сайт или ищете ПРОВЕРЕННЫЕ способы быстрой индексации ваших новых сообщений в блоге, этот пост для вас.

Первое, что вы, вероятно, захотите сделать после запуска блога или веб-сайта, — это проиндексировать его в Google. Если вы не проиндексируете свой сайт в Google, вы не получите от него никакого трафика, даже если вы создадите контент.

Отсутствие индексации сайта в Google — одна из самых больших ошибок, которые совершают большинство новых блоггеров.

Если вы тоже один из них и хотите очень быстро проиндексировать свой сайт в Google, это руководство для вас, где вы узнаете несколько быстрых способов проиндексировать свой новый сайт в результатах поиска Google.

Самое первое, что вам нужно запомнить: индексирование ваших новых сайтов в Google бесплатное . Вам не нужно ничего платить. Но сделать это в первый раз сложно.

Итак, давайте упростим задачу и обсудим, как заставить Google очень быстро индексировать ваш сайт.

Содержание

  • Вот как заставить Google быстро индексировать ваш сайт
    • Отправьте свой веб-сайт в Google
    • Создайте карту сайта XML и отправьте в Google
    • Создайте файл robots.txt
    • Создайте качественные обратные ссылки
    • Используйте каталоги блогов, чтобы представить свой сайт
    • Как Google сканирует и индексирует ваши страницы?
  • Часто задаваемые вопросы об индексировании веб-сайта в Google
    • Заключительные мысли по быстрой индексации вашего нового сайта в Google

Вот как заставить Google быстро индексировать ваш сайт

Отправьте свой веб-сайт в Google

Если вы хотите, чтобы Google проиндексировал ваш новый сайт, вы должны отправить свой URL в Google из Google Search Console (GSC). Для этого вам необходимо создать бесплатную учетную запись в инструментах для веб-мастеров, используя свою учетную запись Google.

Вот простое пошаговое руководство о том, как отправить свой сайт в Google, чтобы он начал индексироваться в результатах поиска Google.

Шаг 1. Нажмите здесь, чтобы перейти в консоль поиска Google. После того, как вы нажмете на ссылку, вам будет предложено выбрать тип недвижимости.

Вот как это выглядит;

Как вы можете видеть выше, вы найдете два варианта. Один из них — ввести доменное имя или префикс URL.

Для типа домена требуется проверка DNS (служба доменных имен), тогда как для префикса URL вы можете найти несколько методов проверки.

Шаг 2. Мы рекомендуем вам попробовать их префикс URL, поскольку он позволяет вам подтвердить право собственности на свой сайт несколькими способами. После того, как вы введете URL-адрес своего сайта, он покажет следующее.

Как вы можете видеть выше, он просит вас подтвердить свое право собственности.

Вы можете сделать это несколькими способами;

  • Используя свою учетную запись Google Analytics
  • С помощью диспетчера тегов Google
  • Связывая запись DNS с Google
  • Или просто добавив метатег на главную страницу вашего сайта.

Совет: если вы используете WordPress, установите плагин под названием RankMath SEO, поскольку он позволяет быстро подключить ваш сайт к консоли поиска Google, чтобы вы могли отслеживать, как Google индексирует ваш сайт.

Чтобы проверить использование плагина Rank Math SEO, вам просто понадобится HTML-код из вашей поисковой консоли Google, который выглядит следующим образом:

Скопируйте весь код.

Теперь просто перейдите в настройки Search Console плагина Rank Math.

Вот как это выглядит;

Вставьте код в поле Search Console и нажмите кнопку «Авторизовать». Вот и все, Google проверит ваш ключ и авторизует вашу учетную запись.

Кроме того, вы также можете отправить свой сайт в Google, используя следующий метод.

После того, как у вас будет учетная запись в GSC, войдите в нее, и вы увидите страницу консоли поиска, где вы можете добавить новый сайт, нажав «Добавить свойство».

Вот как это выглядит;

Нажмите «Добавить свойство» под раскрывающимся списком поиска (вы можете добавить до 1000 свойств в свою учетную запись Google Search Console).

Подтвердите право собственности на домен, используя указанный выше метод или доступные альтернативные методы:

Теперь просто перейдите в раздел проверки URL, который выглядит следующим образом:

Обязательно введите конкретный URL-адрес публикации или страницы, который вы хотите проверить.

Как вы можете видеть выше, всякий раз, когда вы хотите быстро проиндексировать и снова получить в Google свои отдельные страницы (обычно при обновлении старых сообщений), вы можете легко сделать это из консоли поиска Google с помощью проверки URL.

Прочтите: Как быстро ускорить работу сайта WordPress

Создайте карту сайта XML и отправьте в Google

Карта сайта XML содержит список всех URL-адресов веб-сайта, таких как сообщения и страницы блога. Каждый веб-сайт должен иметь карту сайта в формате XML, потому что она отображает структуру веб-сайта и его состав.

Сканеры поисковых систем могут легко найти содержимое вашего сайта, если у вас есть карта сайта XML, потому что карта сайта позволяет сканерам легко видеть, что находится на вашем сайте, и легко его индексировать.

Вот 2 самых важных вещи, которые вам нужно сделать (после создания веб-сайта или блога).

  1. Создайте карту сайта XML для своего сайта
  2. Отправьте карту сайта XML вашего сайта в Google

Давайте поговорим о каждом из них, чтобы вы могли лучше понять.

1. Создайте карту сайта XML для своего сайта.

Существует множество способов создать карту сайта XML для вашего сайта, в том числе с помощью таких инструментов, как Screaming Frog, XML Sitemap Generator и т. Д., Но если вы используете WordPress, это довольно просто.

Есть замечательный плагин, который можно использовать для простого создания XML-карты сайта.

Плагин называется «Google XML Sitemaps». Его можно использовать совершенно бесплатно, и миллионы людей по всему миру используют его для создания карт сайта. Он поддерживает все виды страниц, сгенерированных WordPress, а также настраиваемые URL-адреса и создает карты сайта XML, чтобы помочь поисковым системам, таким как Google, Bing, Yahoo и Ask.com, лучше индексировать ваш сайт.

Вот как это выглядит;

Как вы можете видеть выше, вам не нужно делать ничего лишнего, так как это работает из коробки. Просто установите и активируйте плагин.

Краткое примечание: при желании вы можете открыть страницу конфигурации плагина, которая находится в разделе «Настройки»> «XML-Sitemap», и настроить такие параметры, как приоритеты. Плагин автоматически обновит вашу карту сайта, если вы публикуете сообщение, так что делать больше нечего.

2. Отправьте карту сайта XML в Google.

Чтобы отправить свою карту сайта в формате XML в Google, вам нужно посетить консоль поиска Google, выбрать свой веб-сайт и нажать на опцию «Карты сайта», которая выглядит следующим образом;

Добавьте URL-адрес вашего файла Sitemap (например, sitemap.xml) и нажмите кнопку отправки, все готово. Google просканирует вашу карту сайта и начнет сканирование и индексирование всех ссылок, перечисленных в представленном файле карты сайта.

Создайте файл robots.txt

Robots.txt — это текстовый файл на вашем веб-сайте, который инструктирует поисковые системы, такие как Google и Bing, о том, что индексировать, а что не индексировать на вашем сайте. Это означает, что вы также можете указать Google, что сканировать, а чего следует избегать (если вы не хотите индексировать определенные страницы на своем сайте).

Вот как выглядит пример файла robots.txt;

Как вы можете видеть выше, вы можете заблокировать URL-адреса, такие как обзоры, элементы поиска, PDF-файлы и т. Д., Со своего веб-сайта в результатах поиска Google.

Хорошей новостью является то, что вы можете использовать практически любой текстовый редактор для создания файла robots.txt для своего веб-сайта (но текстовый редактор должен уметь создавать стандартные текстовые файлы UTF-8).

Мы НАСТОЯТЕЛЬНО рекомендуем добавить файл robots.txt к вашему основному домену и всем поддоменам на вашем веб-сайте.

У Google есть полезный ресурс robots.txt для создания файла robots.txt.

Файл robots.txt находится в корне вашего сайта. Итак, для сайта www.example.com файл robots.txt находится по адресу www.example.com/robots.txt. robots.txt — это простой текстовый файл, соответствующий Стандарту исключения для роботов.

Вот простой файл robots.txt с двумя правилами, описанными ниже:

# Группа 1

Пользовательский агент: Googlebot

Запретить: / nogooglebot /

# Группа 2

Пользовательский агент: *

Позволять: /

Карта сайта: http://www.example.com/sitemap.xml

Вот объяснение:

Пользовательский агент с именем «робот Googlebot» не должен сканировать папку http://example.com/nogooglebot/ или какие-либо подкаталоги.

Все остальные пользовательские агенты могут получить доступ ко всему сайту.

Вот несколько вещей, которые вам нужно знать;

  • User-agent (это бот, к которому применяется следующее правило)
  • Disallow (это URL-путь, который вы хотите заблокировать)
  • Разрешить (это URL-путь в заблокированном родительском каталоге, который вы хотите разблокировать)

Файл Sitemap сайта находится по адресу https://www.example.com/sitemap.xml.

Вот еще один пример того, как его использовать.

Пользовательский агент: *

Разрешить: / about / company /

Disallow: / about /

В приведенном выше примере все поисковые системы, такие как Google и Bing, не имеют доступа к каталогу / about /, за исключением подкаталога / about / company /.

Вы понимаете? Таким образом, в основном файл robots.txt предназначен для того, чтобы сообщить сканерам поисковых систем, какие URL-адреса им не следует посещать на вашем веб-сайте.

Важно: обязательно добавьте файл карты сайта XML в файл robots.txt. Это гарантирует, что пауки поисковых систем найдут вашу карту сайта и легко проиндексируют все страницы вашего сайта.

Вы можете использовать этот синтаксис:

Карта сайта: https://www.example.com/sitemap.xml

  • Как только это будет сделано, сохраните и загрузите файл robots.txt в корневой каталог вашего сайта. Например, если ваш домен www.example.com, вы разместите файл по адресу www.example.com/robots.txt.
  • После того, как файл robots.txt будет размещен, проверьте файл robots.txt на наличие ошибок.

Вы можете использовать такие инструменты, как SEObook или генератор robtos.txt SEOptimer, чтобы легко сгенерировать для вас файл с вводом страниц, которые нужно исключить.

Создайте качественные обратные ссылки

Обратные ссылки чрезвычайно важны. Если вы хотите, чтобы ваш новый сайт имел высокий рейтинг или быстро индексировался поисковыми роботами Google, вам нужны ссылки.

Чем больше качественных и релевантных ссылок имеет ваш сайт, тем лучше для вас будет расти рейтинг в результатах поиска.

Примечание: мы написали подробное руководство по созданию ссылок, в котором вы можете найти 12 ПРОВЕРЕННЫХ способов создания ссылок высокого качества, поэтому обязательно ознакомьтесь с ним.

Вот несколько невероятных способов создания ссылок на ваш новый сайт.

Пишите качественные гостевые посты: один из вечнозеленых способов создания качественных и очень релевантных ссылок на ваш сайт — это писать гостевые посты для других блогов в вашей нише.

Мы написали огромное руководство по сайтам гостевых публикаций, где вы можете найти более 250 сайтов, чтобы бесплатно отправлять гостевые сообщения. Вы можете писать гостевые посты не только для создания ссылок, но и для налаживания прочных отношений с другими блоггерами, расширения вашей сети, увеличения трафика, улучшения вашего бренда в Интернете и так далее.

Информационно-пропагандистская работа с Blogger: информационно- пропагандистская работа с Blogger — это практика установления контактов с другими блоггерами. Большинство людей делают все неправильно, когда пишут другим блоггерам с просьбой о ссылках. Никто не ссылается на ваши материалы, если они даже не знают вашего имени или бренда.

Вот почему вам нужно стратегически подходить к работе с блогерами. Во-первых, установите взаимопонимание, комментируя их блоги, оставляя положительные отзывы, покупая их продукты, делая ссылки на их контент и так далее. Рано или поздно они тоже ответят взаимностью. Вы можете узнать больше о стратегии охвата блоггеров, чтобы знать, как это делать правильно.

Создавайте эпический контент: создание контента, достойного ссылок, требует времени, но оно всегда стоит ваших усилий и денег. Никто не ссылается на посредственный контент. Если вы создаете в 10 раз лучший контент, чем ваши конкуренты, вам будет проще получать входящие ссылки.

Просто обязательно проанализируйте своих конкурентов, найдите то, что им подходит, создайте вечнозеленый контент, который превосходит контент ваших конкурентов, и вы найдете множество способов получить высококачественные ссылки на свой сайт. Используйте такие инструменты, как SEMrush, для анализа своих конкурентов!

Используйте каталоги блогов, чтобы представить свой сайт

Один из самых быстрых способов проиндексировать ваш сайт в результатах поиска Google — это добавить ваш сайт в каталоги блогов. Большинство каталогов блогов обычно позволяют вам бесплатно размещать контент вашего сайта, а также дают вам трафик и ссылки.

Если вам интересно, какие каталоги использовать для отправки вашего сайта, ознакомьтесь с этим списком бесплатных сайтов для отправки блогов с высоким DA. Он включает в себя более 30 сайтов-каталогов блогов с самым высоким авторитетом домена, на которых вы можете разместить свой сайт бесплатно.

Также не забудьте создать профили в социальных сетях для вашего недавно запущенного веб-сайта или блога.

Используйте такие сайты, как Pinterest, Facebook, Twitter, LinkedIn и т. Д., Чтобы создавать страницы для своих собственных сайтов и регулярно размещать на них новые сообщения.

Хотя все ссылки с сайтов социальных сетей являются nofollow, но из-за их авторитета домена (обычно более 80+) они помогают вам очень быстро проиндексировать ваш новый сайт в Google.

Как Google сканирует и индексирует ваши страницы?

Знаете вы это или нет, но Google сканирует и обрабатывает миллиарды страниц в Интернете.

Сканер Google, известный как робот Google, начинает сканирование со списка URL-адресов веб-страниц, созданных в результате предыдущих сканирований, а затем собирает эти страницы с помощью карты сайта. Карта сайта может быть предоставлена ​​в Google Search Console.

Если новые страницы находятся в карте сайта вашего сайта, Google обнаружит их и просканирует эти страницы. Затем он ранжирует эти страницы, учитывая более 200 факторов ранжирования Google, включая контент, ссылки, Rankbrain и так далее.

После завершения всего процесса сканирования все результаты начнут появляться в поиске Google, и всякий раз, когда вы обновляете новый контент, этот контент будет обновляться соответствующим образом.

Вот простая иллюстрация того, как это работает.

Вы хотите проверить, присутствует ли конкретный сайт в результатах поиска Google?

Просто введите «Site: domainname.com».

Например, вот что отображается в Google для нашего сайта Bloggers Passion

Как вы можете видеть выше, наш сайт указан в поиске Google, и более 500 страниц индексируются в результатах поиска Google (включая страницы, сообщения в блогах и т. Д.).

Часто задаваемые вопросы об индексировании веб-сайта в Google

Вот несколько часто задаваемых вопросов о том, как заставить Google индексировать ваш сайт.

Зачем индексировать ваш сайт в Google?

Индексирование вашего веб-сайта или блога в Google дает следующие преимущества.

  • Вы можете заставить других быстро находить ваш сайт и контент
  • Вы можете увеличить трафик органически
  • Получите больше конверсий
  • Вы можете увеличить свои продажи (если контент вашего сайта будет мгновенно проиндексирован в Google)
  • И список продолжается

Сколько времени обычно требуется для индексации вашего сайта в Google?

Короткий ответ: в течение 24 часов. У Google есть пауки, которые сканируют поисковую информацию по всей сети. Чем больше контента на вашем веб-сайте, тем больше времени обычно требуется для индексации в Google.

При этом, как только они найдут карту сайта вашего сайта, они начнут сканировать и индексировать контент вашего нового сайта в результатах поиска Google.

Нужна ли мне поисковая консоль Google для индексации моего сайта?

Да, у вас обязательно должна быть учетная запись в Google Search Console (GSC). Вы можете бесплатно создать учетную запись для себя, используя свою учетную запись GMail. Получив доступ к GSC, вы можете начать добавлять свои сайты в индекс и отображать свои сайты в результатах поиска Google.

Какие инструменты могут помочь мне индексировать мой сайт?

Вот несколько инструментов (все они бесплатны), которые вы можете использовать;

  • Google Page Insights (для быстрого анализа скорости и производительности вашего сайта)
  • SEO-паук Screaming Frog (он помогает вам с битыми ссылками и другими аспектами на странице, и вы также можете создать карту сайта XML, используя его)
  • Консоль поиска Google (для получения и сканирования как Google для более быстрой индексации, и вы также можете найти все проблемы веб-сайта, такие как проблемы со сканированием)
  • Генератор карты сайта XML (это бесплатный веб-сайт, который поможет вам создать карту сайта XML, если у вас еще нет карты сайта)

Просмотрите больше руководств по SEO:

  • Как получить избранные фрагменты Google для вашего контента в 2020 году
  • Полное руководство по поиску ключевых слов LSI в 2020 году
  • Как получить звездные рейтинги для обзоров продуктов в поиске Google?
  • Пример использования SEO: сколько времени мне потребовалось, чтобы подняться на вершину рейтинга в Google
  • Окончательное руководство по повышению авторитета домена вашего сайта в 2020 году

Заключительные мысли по быстрой индексации вашего нового сайта в Google

Сканеры поисковых систем действительно быстрее и умнее.

Пинг вашего сайта, использование консоли поиска Google, создание ссылок с других сайтов, умные ссылки — все это может быть полезно. Но если у вас нет карты сайта, поисковым роботам будет очень сложно сканировать ваш сайт. Единственный способ ускорить поисковый рейтинг вашего контента — это сделать ваш сайт очень быстро проиндексированным в Google.

Вы нашли это руководство по быстрой индексации вашего сайта в Google полезным? Пожалуйста, поделитесь им с другими. Если у вас есть какие-либо вопросы, дайте нам знать в комментариях ниже.

Как проверить 100 тыс страниц на вхождение в индекс Google — инструкция

Для специалиста по поисковой оптимизации понимание того, как Google и другие поисковые системы сканируют и индексируют веб-сайт, является одним из главных приоритетов. Однако получить необходимые данные для анализа сотен тысяч страниц не так просто, как хотелось бы.

Первое, о чем подумает опытный SEO-гуру, — это автоматическая обработка лог-файла визитов сайта, чтобы отследить посещения робота Google. Но само посещение еще не гарантирует добавление страницы в индекс. У нас сотни тысяч страниц находятся в индексе, поэтому мы задумались о разработке надежного способа получения данных о статусе индексации Google.

В этом материале мы поговорим:

  • почему важно знать статус индексации сайта;

  • какие проблемы чаще всего возникают при сборе данных об индексации Google;

  • о решении этой задачи с помощью кастомного инструмента проверки индексации;

  • как проверить индексацию сайта самостоятельно.

Почему важно знать статус индексации сайта

Если вы крупный издатель, то наверняка хотите привлечь потенциальных пользователей или клиентов на сайт из поиска Google. Если веб-сайт (или его часть) не проиндексирован, вы не будете отображаться в результатах поиска и потеряете любой потенциальный органический трафик, конверсии или рекламный инвентарь останется невостребованным.

Но может быть и обратная проблема. Если веб-сайт создает URL-адреса в геометрической прогрессии (обычная проблема на сайтах электронной торговли) или допускает неконтролируемый пользовательский контент, то Google может сканировать и индексировать больше, чем следовало бы. Это может быстро привести к огромной неэффективности в ущерб основной архитектуре сайта. В этом случае страницы, которые представляют пользу для издателя будут отдаваться сервером медленнее, именно потому что сервер тратит много времени на отработку запросов бота Google. Поэтому реальный человек, когда зайдет на сайт, получит контент медленнее или вообще не получит, так как сервер сбросит его соединение по таймауту.

Распространенные проблемы при сборе данных об индексации Google

Скорее всего, для сбора данных индексации вы используете Google Search Console или стороннее решение. Однако оба варианта имеют свой набор недостатков, когда дело доходит до проверки индексирования сотен тысяч страниц. Обычно они связаны с доступностью данных и точностью результатов. Это те проблемы, с которыми столкнулись мы.

Ограничения Google Search Console

Google Search Console (GSC) — достоверный и точный источник данных о статусе индексации, ведь он подключен к системе индексирования Google. В GSC есть три суперполезных отчета, которые предоставляют данные о статусе индексации: инструмент URL Inspector, отчет о покрытии и отчет о файлах Sitemap.

Однако ни один из этих отчетов не подходит для крупномасштабных веб-сайтов, поскольку GSC ограничивает количество URL-адресов, которые вы можете проверять в день (50 URL для инспектора, и по 1000 URL в остальных отчетах).

Мы хорошо знаем об этом, потому что нам приходилось автоматизировать работу браузера для работы с URL Inspector Tool. Возможно, мы поделимся этим драгоценным опытом в новой статье.

Теоретически отчет о покрытии и отчет о файлах Sitemap могут помочь, но, к сожалению, Google Search Console ограничивает отчет об экспорте до 1000 строк данных, и сейчас нет доступа к API для извлечения большего количества.

GSC ограничивает экспорт до 1000 URL, но у нас сотни тысяч страниц… Спасибо Google 🙂

Наверное, единственный способ обойти это ограничение — разделить всю архитектуру сайта на XML-карты объемом не более 1000 URL-адресов. Следовательно, если на сайте есть 100 000 (известных / важных) URL-адресов, потребуется создать 100 XML-файлов Sitemap. Но этим было бы очень сложно управлять, и поэтому не вариант.

Кроме того, это не даст вам необходимых данных для индексации неконтролируемых URL-адресов, созданных с помощью фасетной навигации или пользовательского контента.

Ограничения URL Profiler

В некоторых случаях профилировщик URL был подходящим вариантом для сбора данных индексации. Хотя нам нравится этот инструмент для решения других задач, мы поняли, что у него много проблем с получением точных данных для «нечистых» URL.

Некоторые примеры включают параметризованные URL-адреса, URL-адреса с закодированными символами, URL-адреса с различным регистром букв и URL-адреса с небезопасными символами.

Решение: кастомный инструмент проверки индексации

Чтобы обойти ограничения, с которыми сталкиваются большинство SEO-специалистов, работающих с крупными проектами, мы разработали специальный скрипт для проверки индексации.

Он может проверять неограниченное количество URL-адресов с любыми типами проблемных символов: параметры, кодировка, зарезервированные символы, небезопасные символы, разные алфавиты — если Google проиндексировал страницу, наш скрипт подтвердит это.

Как настроить скрипт

Вам понадобятся начальные знания о командной строке и немного о node.js. Скорее всего, этого будет достаточно.

Сначала установите последнюю версию Node.js на свой компьютер. Затем загрузите или клонируйте наш репозиторий с GitHub.

Откройте командную строку и перейдите в папку, которую вы только что скачали. Затем установите необходимые зависимости, используя следующую команду:

npm install

Раньше, если бы вам приходилось парсить результаты поиска Google, понадобилось бы много прокси-серверов, но благодаря ребятам из ScraperAPI это больше не проблема. У них есть тысячи прокси по всему миру, поэтому всё, что вам нужно сделать, — это отправить запрос, используя вызов через их API, они будут выполнять ротацию прокси в фоновом режиме. Как это сделать, читайте дальше.

Перейдите на сайт ScraperAPI и создайте учетную запись. Первые 1000 запросов в месяц бесплатны, этого более чем достаточно для тестирования нашего скрипта, а за $29 можно проверить 250 000 страниц.

Зайдите в свой аккаунт и получите свой API-ключ.

Добавьте свой ключ API в файл APIKEY.js, который находится в папке, которую вы скачали с нашего репозитория.

Пора запускать скрипт

Теперь добавьте список URL-адресов, которые вы хотите проверить на индексирование Google и сохраните его без заголовков в виде CSV с именем urls.csv в папке, которую скачали. Обязательно используйте полные URL-адреса с протоколом.

Если у вас нет списка, вы можете использовать наш список сложных URL. Мы подготовили его, когда разрабатывали скрипт, и он включает почти все проблемные типы URL-адресов, а также несколько поддельных URL-адресов, чтобы проверить, не было ли ложных срабатываний.

Перейдите в обратно в командную строку и запустите скрипт с помощью следующей команды:

npm run start

Работа скрипта началась. Теперь вы должны увидеть URL-адреса из вашего CSV, появляющиеся в командной строке с кодом ответа сервера.

Поскольку скрипт использует прокси, иногда вы будете получать код состояния 500. Ничего страшного:, скрипт повторно обработает эти ошибки и повторно запустит список, пока не будут проверены все URL-адреса.

По завершении сценария вы получите сообщение об успешном выполнении и новый файл с именем results.csv. Внутри вы найдете список URL-адресов с указанием статуса индексации.

В среднем проверка 2500 URL-адресов занимает около часа, поэтому если вы планируете использовать этот скрипт для тысяч URL-адресов, имейте это в виду.

Что такое Google Search Console, руководство по работе в сервисе

Краткий обзор Google Search Console. Рассказываем, как устроен сервис и что нужно сделать сразу после подключения своего сайта к GSC.

Что такое Google Search Console

Это инструмент для вебмастеров, помогающий оптимизировать сайты для продвижения в поиске Google. 

При помощи Google Search Console можно:

  • Выяснить, есть ли на странице какие-то технические проблемы, мешающие ее индексированию и отображению в поисковой выдаче.

  • Узнать, какие ключи чаще всего приводят пользователей на выбранную страницу. 

  • Вручную указать ссылки, которые робот Google может анализировать, а какие – нет. 

В общем, это панель управления для SEO-специалистов и вебмастеров, помогающая взаимодействовать с поисковым роботом Google.

Как добавить свой сайт в GSC?

Перед началом вам понадобится учетная запись Google и почтовый адрес в Gmail. Их можно создать в самом почтовом сервисе или в любом приложении корпорации. Затем действуем по следующей схеме:

  • Открываем сайт Search Console. 

  • Указываем адрес своего сайта в меню «Доменный ресурс». 

  • Затем подтверждаем права на владение сайтом, вставив специальный текстовый документ (от Google) в DNS-параметры своего ресурса. Это можно сделать через сайт регистратора DNS, создав новую TXT-запись. За более подробной инструкцией лучше обратиться к своему хостинг-провайдеру.

Как устроен интерфейс GSC

Все ключевые пункты меню расположены в боковой панели слева. В них содержится вся необходимая информация для работы с добавленным ресурсом. В их числе аналитические показатели, помогающие корректно оптимизировать отдельные страницы и веб-сайт целиком. 

Собираем аналитические данные 

Данные в Google Search Console делятся на категории. Каждая отвечает за определенные параметры. В самой первой вкладке под названием «Обзор» (Overview) содержится общая информация о состоянии ресурса. 

Подобный отчет использовать на практике сложно. Он не содержит точечных данных, а лишь отображает картину в масштабе всего сайта. На ней можно обнаружить радикальные изменения и, к примеру, оценить общее число обнаруженных ошибок. Но для настройки и изменения параметров SEO, нужно оценить другие показатели.

Уровень эффективности

Первая вкладке называется «Эффективность». В ней отображаются следующие показатели:

  1. Количество кликов по выбранным для анализа ссылкам. 

  2. Количество показов выбранных для анализа ссылок в поисковой выдаче. 

  3. Средний уровень CTR в процентном соотношении. 

  4. И средняя позиция ресурса в поисковой выдаче.

Более точные детали можно узнать, если полистать окно «Эффективность» и выбрать один из фильтров (по запросам, по страницам, по странам, по устройства и т.п.). 

Фильтры можно создавать самостоятельно, отсекая из аналитики страницы или запросы, не соответствующие выбранным критериям.

Анализируем запросы

Не покидая раздел «Эффективность» можно выяснить, по каким запросам ранжируется выбранная страница, на каких позициях находится и так далее. Для этого нужно создать новый фильтр:

  • Кликнуть по пункту «Новый».

  • Выбрать опцию «Страница».

  • Указать тип фильтра «Точный URL».

  • Ввести адрес сайта/страницы, которые надо проанализировать. 

После этого в меню с фильтрами появится полный список ключевых слов, используемых при ранжирование указанной в фильтре страницы. 

Ищем страницы с низким показателем CTR

Все в той же вкладке «Эффективность» можно обнаружить страницы, которые часто показываются в результатах поиска и находятся на первых позициях, но при этом редко получают клики.

Чтобы это сделать, надо:

  • Отфильтровать все ссылки, чьи позиции занимают третье место или ниже. Так мы сосредоточимся исключительно на нужных нам страницах. 

  • Затем анализируем ключевые слова с низким показателем CTR. Если это значение на первых позициях ниже 30%, то стоит задуматься о целесообразности использования этого ключа. Возможно, вы попали в коммерческий запрос, и ни один из способов привлечения внимания не сработает, так как сам поисковик показывает много рекламы, «отбирающей» вашу аудиторию.

Иногда проблема кроется в некачественно оформленном сниппете. В этом случае нужно сделать более привлекательные заголовок и описание.

Ищем дополнительные запросы для продвижения

По некоторым запросам сайт может находиться далеко за спиной конкурентов, но при этом все же проходить по ним на первую страницу поисковой выдачи. 

Такие запросы можно обнаружить, если настроить фильтр на отображение страниц, не входящих в топ-10 органической поисковой выдачи Google.

Обратите внимание на контент, хранящийся за этими ссылками. Возможно, получится сделать более подробную статью, добавить внешних ссылок или с помощью других SEO-техник вытянуть страницу в топ. Не стоит терять потенциал запросов, которые уже и так выгодно отображаются в поисковике.

Первичная настройка

Далее поэтапно рассмотрим действия, которые стоит выполнить после подключения сайта к Google Search Console. Эти шаги помогут лучше понять базовые принципы работы GSC, а также на старте избежать некоторых проблем, которые могут возникнуть у новых пользователей панели управления.

Проверка ссылок

Для начала стоит проверить страницы на сайте, индексируются ли они. И если индексируются, то не возникает ли у бота Google сложностей при анализе содержимого страницы.

Функция проверки закреплена в верхней части интерфейса GSC и доступна из любого окна панели управления. Достаточно кликнуть по поисковому полю справа от надписи «Google Search Console» и выбрать адрес для проверки. 

Если нет ошибок, то все хорошо, можно запросить повторное индексирование, нажав на кнопку «Запросить индексирование». Если есть ошибки, то надо кликнуть по фразе «Результаты проверки» и посмотреть, что пошло не так. После исправления возникших проблем нужно повторно запросить индексацию.

Также стоит запросить скриншот от бота Google, чтобы узнать, все ли элементы страницы загружаются и может ли он без ошибок проиндексировать каждый компонент сайта.

Настройка покрытия

Если открыть пункт «Покрытие», то первым, что вы увидите, будет таблица с информацией о состоянии страниц. Тут отобразятся ошибки, если они возникли или в работе каких-то ссылок возникли сбои. 

В этом разделе нам нужно пройтись по всем ссылкам, которые помечены красным или желтым цветом. Открывая каждую из них вы увидите, как сервис объясняет, с чем связана проблема и как ее можно решить. Тут же появится кнопка для решения проблемы (она доступна не во всех случаях, но если доступна, то это лучший способ исправить все проблемы). 

Например, в ситуациях, когда ошибка возникает из-за блокировки страницы через robots.txt, сервис предложит открыть его и отследить директиву, запрещающую индексацию «поломанного» сайта.

С другими ошибками Google Search Console тоже знаком. Он оповестит вас, но не всегда сможет предложить быстрое решение.

Файлы Sitemap

С помощью этой опции можно отправить поисковому боту карту сайта, по которой он должен ориентироваться при индексации страниц.

Ваша задача с самого начала создать эту карту и отправить ее на проверку в GSC. Для этого в разделе «Файлы Sitemap» надо указать адрес соответствующих документов, а потом нажать на кнопку «Отправить».

Здесь же можно посмотреть, имеются ли ошибки в одной или нескольких прикрепленных картах.

Важно исправлять ошибки, связанные с sitemap, в первую очередь.

Скрытие страниц от индексирования роботом Google

Если на сайте есть страница, вызывающая ошибку, но у вас пока нет возможности ее исправить, то можно попросить бота Google не индексировать ее в течение полугода. За это время можно разыскать метод устранения всех обнаруженных неисправностей. 

Чтобы попросить Google удалить ссылку из анализа, надо нажать на кнопку «Создать запрос» в соответствующем меню. 

Удаление бывает двух видов:

  • Временное. Выбранный адрес перестанет отображаться в поисковой выдаче.

  • Удаление кэшированной копии страницы. Адрес продолжит появляться в поисковой выдаче, но кэшированная версия сайта будет стерта вместе с описанием в сниппете до повторной индексации. 

По ходу удаления можно указать, будет ли изъята из индексации только выбранная ссылка или все адреса с указанными префиксом.

Оптимизация производительности и верстки

В следующем разделе отображается средняя скорость загрузки страниц. Если одна или несколько из них загружаются медленно, это послужит поисковому боту сигналом, что сайт плохо оптимизирован и не заслуживает высоких позиций в поисковой выдаче. 

Придется провести работу над ошибками, а потом нажать на кнопку «Проверить исправления», чтобы повторно заставить GSC оценить скорость работы ресурса. 

В таком же ключе стоит проделать работу над оптимизацией сайта под мобильные устройства. Поисковой бот Google умеет находить проблемы в адаптивной верстке и помечает их в разделе «Удобство для мобильных».

Эти параметры в дальнейшем будут влиять на общий рейтинг Core Web Vitals, который станет важной характеристикой при ранжировании страниц уже с мая 2021 года. Поэтому вебмастерам стоит задуматься о производительности и адаптивности уже сейчас.

Дополнительные параметры для более успешного продвижения

Закончив с базовой настройкой панели управления и исправив главные проблемы, обнаруженные поисковым роботом Google, можно перейти к более детальной настройке и оценке дополнительных аналитических данных, помогающих быстрее и эффективнее продвигать сайт.

Обеспечение безопасности 

Надо проверить, не находится ли сайт под фильтром и не попали ли на него вирусы. В этом разделе отображается наиболее полный отчет о безопасности вашего ресурса. 

Если проблем нет, то здесь будет лишь одно соответствующее сообщение. При наличии вирусов или фильтров GSC вас обязательно об этом оповестит. 

Стоит регулярно проверять этот раздел и исправлять ошибки по мере их появления, так как они угрожают и ранжированию, и сохранности данных на ресурсе.

Таргетинг по регионам и статистика сканирования

Следующим шагом станет настройка региона. Его можно присвоить в меню «Таргетинг по странам». Это следует сделать, если отсутствует региональная привязка через домен. 

Регион также нужно указывать, чтобы избежать ошибки «На сайте нет атрибутов hreflang», возникающей при отсутствии названого атрибута. Она сообщает боту о том, что индексируемая страница может отображать контент на нескольких разных языках.

Наличие этой информации является обязательным для нормального взаимодействия ресурса с поисковым ботом Google.

Такая привязка не нужна моноязычным информационным сайтам. 

Анализ оповещений

Google будет регулярно отправлять вам сообщения с технической информацией. Все это скопом попадает в некий аналог Gmail, созданный для Google Search Console.

Но эти письма будет приходить и на почту тоже, чтобы вы точно не упустили резких изменений в работе сайта или появления новых ошибок после внесения последних правок в работу страниц.

Настройки ссылок

Вами могут использоваться параметры, непривычные для большинства интернет-ресурсов. К примеру, у онлайн-магазинов может быть куча страниц-дубликатов с разными ссылками. Это считается нарушением в обычной ситуации, но Google Bot зачастую справляется с распознаванием магазинов и корректно их анализирует, но не всегда.

Лучше перестраховаться и указать все специфичные параметры в этом меню заранее.

Но если не знаете, что обозначают настройки в этом разделе панели управления, то оставьте все по умолчанию. Ничего не меняйте ради интереса. 

Дополнительные инструменты

В предпоследнем разделе Google Search Console хранится набор ссылок на другие сервисы Google, помогающие проанализировать «качество» сайта и исправить обнаруженные проблемы. Среди них:

  • Сервис для оценки качества рекламы на странице. Он оповестит, если по указанному адресу обнаружились проблемы с контекстной рекламой (огромные баннеры на весь экран или их избыточное количество).

  • Механизм по поиску «черных» схем продвижения и методов обмана аудитории на указанном ресурсе. 

  • Инструменты для тестирования технических аспектов сайта.

  • Ссылка на подборку популярных инструментов Google, используемых вебмастерами.

Вместо заключения

Основные аспекты работы с Google Search Console рассмотрены. Используйте панель управления сервиса, чтобы наблюдать за изменениями на странице, отслеживайте ошибки и старайтесь как можно скорее их исправлять. Вот и вся суть. Никакой магии, только внимание к деталям и желание делать хорошие сайты.

Хороший способ быстро проиндексировать сайт в Google и проверьте авторство своих статей : )

Привет, друзья IdeaFox!

Сегодня будет совсем простой технический пост, который может быть полезен веб-мастерам и блогерам. Как говорится, извините за оффтоп :- )

Началось все с того, что недели три назад Гугл стал неохотно индексировать сайт моей жены (совсем перестал), и я стал копать в этом направлении.

Стандартные методы с твитами и соц.сетями не помогали, даже не знал, что делать. Перепробовал все, что возможно.

Почитал форумы и в очередной раз содрогнулся от  воплей ужаса вебмастеров, которые столкнулись с такой же проблемой, а старые методы тупо не работают.

Не знаю, что за люди обитают на Серче, но они явно нервные, и хожу на этот форум только по большой нужде : — )

В порыве отчаяния 🙂 полез в панель для вебмастеров Google, и обнаружил довольно интересный инструмент, который помог быстро загнать в индекс все нужные страницы её сайта.

Видимо, эта возможность появилась совсем недавно, так как не видел ее полгода назад, когда решал вопросы с индексацией одного проекта…

Если же эта фича существует веками, то поправьте Капитана Очевидность, пожалуйста : )

Что я сделал?

1. Заходим в панель для вебмастеров Гугл, выбираем нужный сайт, и нажимаем на пункт меню “Сканирование”. Затем кликаем на “Посмотреть как Googlebot”

2. Указываем адрес страницы, которую нужно загнать в индекс Google, и нажимаем на кнопку “Получить содержимое”

Появляется предупреждение “Ваш запрос выполнен”, а напротив нашего адреса появляется надпись “В ожидании”

Наконец, видим вот такую красоту:

Естественно, нажимаем на кнопку “Отправить в индекс” и видим последнее окно:

Я указываю параметры как на скриншоте и нажимаю на кнопку “Отправка URL на индексирование”. Если указать “URL И все связанные страницы”, то таких запросов на сканирование можно сделать не более 10 раз в месяц.

Что любопытно, все страницы влетели обратно в индекс буквально за сутки, и там остались. Хотя, до этого неделю ковырялся и никак не мог добиться желаемого результата.

Ограничения:

1. Таким образом можно делать запрос на индексирование не более 500 раз в неделю для одиночных страниц

2. И не более 10 раз для одиночной страницы + все связанные с ней страницы.

Попробуйте, может у кого-то есть проблема с индексацией от этого американского поискового гиганта. Лично меня он выручил : )

Обязательно проверьте авторство своих статей

Кстати говоря, непременно зайдите в раздел “Лаборатория” и кликните на “Статистика для автора”.

Там будут отображены все Ваши страницы, которым принадлежит Ваше авторство. Обязательно это сделайте!

10 способов заставить Google индексировать ваш сайт (которые на самом деле работают)

Если Google не индексирует ваш сайт, вы в значительной степени невидимы. Вы не будете отображаться ни по каким поисковым запросам и не получите никакого органического трафика. Пшик. Нада. Нуль.

Учитывая, что вы здесь, я полагаю, это не новость для вас. Итак, приступим непосредственно к делу.

В этой статье рассказывается, как решить любую из этих трех проблем:

  1. Весь ваш веб-сайт не проиндексирован.
  2. Некоторые из ваших страниц проиндексированы, а другие нет.
  3. Ваши недавно опубликованные веб-страницы не индексируются достаточно быстро.

Но сначала давайте удостоверимся, что мы находимся на одной странице и полностью понимаем эту ошибку индексирования.

Новичок в SEO? Ознакомьтесь с нашим

Что такое сканирование и индексирование?

Google обнаруживает новые веб-страницы путем сканирования Интернета, а затем добавляет эти страницы в свой индекс . Они делают это с помощью веб-паука под названием Googlebot .

Запутались? Давайте определим несколько ключевых терминов.

  • Сканирование : процесс перехода по гиперссылкам в Интернете для обнаружения нового контента.
  • Индексирование : процесс сохранения каждой веб-страницы в обширной базе данных.
  • Web spider : Часть программного обеспечения, предназначенная для выполнения процесса сканирования в любом масштабе.
  • Googlebot : веб-паук от Google .

Вот видео от Google, которое более подробно объясняет этот процесс:

https: // www.youtube.com/watch?v=BNHR6IQJGZs

Когда вы что-то гуглите, вы просите Google вернуть все соответствующие страницы из их индекса. Поскольку часто есть миллионы страниц, отвечающих всем требованиям, алгоритм ранжирования Google делает все возможное, чтобы отсортировать страницы так, чтобы вы сначала увидели наилучшие и наиболее релевантные результаты.

Важным моментом, который я здесь подчеркиваю, является то, что , индексирование и , ранжирование — это две разные вещи .

Индексирование отображается для гонки; рейтинг выигрывает.

Невозможно выиграть, не заняв первое место в гонке.

Как проверить, проиндексированы ли вы в Google

Зайдите в Google, затем выполните поиск по сайту : yourwebsite.com

Это число примерно показывает, сколько ваших страниц проиндексировал Google.

Если вы хотите проверить статус индекса определенного URL, используйте тот же сайт : оператор yourwebsite.com/web-page-slug .

Никаких результатов не будет, если страница не проиндексирована.

Стоит отметить, что если вы пользователь Google Search Console, вы можете использовать отчет Покрытие , чтобы получить более точное представление о статусе индекса вашего веб-сайта. Просто перейдите по ссылке:

Google Search Console> Индекс> Покрытие

Посмотрите количество допустимых страниц (с предупреждениями и без них).

Если в сумме эти два числа не равны нулю, значит, Google проиндексировал по крайней мере некоторые страницы вашего веб-сайта. В противном случае у вас серьезная проблема, потому что ни одна из ваших веб-страниц не проиндексирована.

Примечание.

Не пользуетесь Google Search Console? Подписаться. Это бесплатно. Каждый, кто управляет веб-сайтом и заботится о привлечении трафика от Google, должен использовать Google Search Console. Это , что важно.

Вы также можете использовать Search Console, чтобы проверить, проиндексирована ли конкретная страница. Для этого вставьте URL-адрес в инструмент проверки URL-адресов.

Если эта страница проиндексирована, будет написано «URL находится в Google».

Если страница не проиндексирована, вы увидите слова «URL не в Google.”

Как получить индекс в Google

Вы обнаружили, что ваш веб-сайт или веб-страница не проиндексированы в Google? Попробуйте следующее:

  1. Перейдите в Google Search Console
  2. Перейдите к инструменту проверки URL
  3. Вставьте URL, который Google должен проиндексировать, в строку поиска.
  4. Подождите, пока Google проверит URL-адрес
  5. Нажмите кнопку «Запросить индексирование»

Этот процесс является хорошей практикой при публикации нового сообщения или страницы. Вы фактически сообщаете Google, что добавили что-то новое на свой сайт и что они должны это изучить.

Однако запрос индексации вряд ли решит основные проблемы, мешающие Google индексировать старые страницы. В этом случае следуйте приведенному ниже контрольному списку, чтобы диагностировать и устранить проблему.

Вот несколько быстрых ссылок на каждую тактику — на случай, если вы уже попробовали:

  1. Удалите блоки сканирования в файле robots.txt
  2. Удалите ложные теги noindex
  3. Включите страницу в карту сайта
  4. Удалите мошеннические канонические теги
  5. Убедитесь, что страница не осиротела
  6. Исправьте внутренние ссылки nofollow
  7. Добавьте «мощные» внутренние ссылки
  8. Убедитесь, что страница ценная и уникальная
  9. Удалите некачественные страницы (чтобы оптимизировать «краулинговый бюджет» )
  10. Создавайте качественные обратные ссылки

1) Удалите блоки сканирования в ваших роботах.txt

Google не индексирует весь ваш веб-сайт? Это могло произойти из-за блокировки сканирования в файле robots.txt.

Чтобы проверить наличие этой проблемы, перейдите по адресу yourdomain.com/robots.txt .

Найдите любой из этих двух фрагментов кода:

 User-agent: Googlebot
Disallow: / 
 Агент пользователя: *
Disallow: / 

Обе они сообщают роботу Googlebot, что им не разрешено сканировать какие-либо страницы вашего сайта. Чтобы решить проблему, удалите их.Это , что просто.

Блок сканирования в robots.txt также может быть причиной, если Google не индексирует одну веб-страницу. Чтобы проверить, так ли это, вставьте URL-адрес в инструмент проверки URL-адресов в Google Search Console. Нажмите на блок «Покрытие», чтобы получить более подробную информацию, затем найдите «Сканирование разрешено? Нет: заблокировано файлом robots.txt ».

Это означает, что страница заблокирована в robots.txt.

В таком случае еще раз проверьте файл robots.txt на наличие каких-либо запрещающих правил, относящихся к странице или соответствующему подразделу.

При необходимости удалите.

2) Удалите ложные теги noindex

Google не будет индексировать страницы, если вы им запретите. Это полезно для сохранения конфиденциальности некоторых веб-страниц. Это можно сделать двумя способами:

Метод 1: метатег

Страницы с любым из этих метатегов в разделе не будут проиндексированы Google:

  
  

Это метатег роботов, который сообщает поисковым системам, могут они или не могут индексировать страницу.

Примечание.

Ключевой частью является значение «noindex». Если вы это видите, значит для страницы задано значение noindex.

Чтобы найти все страницы с метатегом noindex на вашем сайте, запустите сканирование с помощью Ahrefs Site Audit. Перейдите к отчету Индексируемость . Ищите предупреждения «Страница Noindex».

Щелкните, чтобы увидеть все затронутые страницы. Удалите метатег noindex со всех страниц, которым он не принадлежит.

Метод 2: X ‑ Robots-Tag

Сканеры также учитывают заголовок HTTP-ответа X ‑ Robots-Tag.Вы можете реализовать это, используя язык сценариев на стороне сервера, такой как PHP, или в файле .htaccess, или изменив конфигурацию сервера.

Инструмент проверки URL в Search Console сообщает, заблокирован ли Google сканирование страницы из-за этого заголовка. Просто введите свой URL и найдите «Индексирование разрешено? Нет: «noindex» обнаружен в http-заголовке «X ‑ Robots-Tag»

Если вы хотите проверить наличие этой проблемы на своем сайте, запустите сканирование в инструменте аудита сайта Ahrefs, затем используйте «Информация о роботах в HTTP-заголовке. ”В проводнике страниц:

Попросите разработчика исключить страницы, которые вы хотите проиндексировать, из возврата этого заголовка.

Рекомендуемая литература: Спецификации метатега роботов и HTTP-заголовка X ‑ Robots-Tag

3) Включите страницу в карту сайта

Карта сайта сообщает Google, какие страницы на вашем сайте важны, а какие нет т. Это также может дать некоторые рекомендации о том, как часто их следует сканировать повторно.

Google должен иметь возможность находить страницы на вашем веб-сайте независимо от того, есть ли они в вашей карте сайта, но по-прежнему рекомендуется включать их.В конце концов, нет смысла усложнять жизнь Google.

Чтобы проверить, есть ли страница в вашей карте сайта, используйте инструмент проверки URL в Search Console. Если вы видите ошибку «URL не в Google» и «Sitemap: N / A», значит, его нет в вашей карте сайта или он не проиндексирован.

Не используете Search Console? Перейдите по URL-адресу карты сайта — обычно yourdomain.com/sitemap.xml — и выполните поиск страницы.

Или, если вы хотите найти все просканируемые и индексируемые страницы, которых нет в вашей карте сайта, запустите сканирование в Ahrefs Site Audit.Перейдите в Page Explorer и примените эти фильтры:

Эти страницы должны быть в вашей карте сайта, поэтому добавьте их. После этого сообщите Google, что вы обновили карту сайта, выполнив ping по этому URL-адресу:

http://www.google.com/ping?sitemap=http://yourwebsite.com/sitemap_url.xml

Replace эту последнюю часть с URL-адресом вашей карты сайта. Вы должны увидеть что-то вроде этого:

Это должно ускорить индексацию страницы Google.

4) Удалите ложные канонические теги

Канонический тег сообщает Google, какая версия страницы является предпочтительной.Выглядит это примерно так:

Большинство страниц либо не имеют канонического тега, либо так называемого канонического тега, ссылающегося на себя. Это говорит Google сама страница является предпочтительной и, вероятно, единственной версией. Другими словами, вы хотите, чтобы эта страница была проиндексирована.

Но если на вашей странице есть ложный канонический тег, то он может сообщать Google о предпочтительной версии этой страницы, которая не существует. В этом случае ваша страница не будет проиндексирована.

Чтобы проверить каноничность, воспользуйтесь инструментом Google для проверки URL. Вы увидите предупреждение «Альтернативная страница с каноническим тегом», если канонический тег указывает на другую страницу.

Если этого не должно быть и вы хотите проиндексировать страницу, удалите канонический тег.

ВАЖНО

Канонические теги не всегда плохи. У большинства страниц с этими тегами есть причины. Если вы видите, что ваша страница имеет канонический набор, проверьте каноническую страницу. Если это действительно предпочтительная версия страницы и нет необходимости также индексировать данную страницу, то канонический тег должен остаться.

Если вы хотите быстро найти ложные канонические теги на всем сайте, запустите сканирование с помощью инструмента аудита сайта Ahrefs. Перейдите в проводник страниц. Используйте следующие настройки:

Это ищет страницы в вашей карте сайта с несамодвижущимися каноническими тегами. Поскольку вы почти наверняка захотите проиндексировать страницы в карте сайта, вам следует дополнительно изучить, возвращает ли этот фильтр какие-либо результаты.

Весьма вероятно, что у этих страниц либо неверный канонический файл, либо их вообще не должно быть в вашей карте сайта.

5) Убедитесь, что страница не «осиротевшая».

Сиротские страницы — это страницы, на которые не указывают внутренние ссылки.

Поскольку Google обнаруживает новое содержание, сканируя Интернет, они не могут обнаружить потерянные страницы с помощью этого процесса. Посетители веб-сайта тоже не смогут их найти.

Чтобы проверить наличие лишних страниц, просканируйте свой сайт с помощью Ahrefs Site Audit. Затем проверьте отчет Ссылки на наличие ошибок «Неисправная страница (нет входящих внутренних ссылок)»:

Здесь показаны все страницы, которые одновременно индексируются и присутствуют в вашей карте сайта, но не имеют внутренних ссылок, указывающих на них.

ВАЖНО

Этот процесс работает только в том случае, если верны два условия:

  1. Все страницы, которые вы хотите проиндексировать, находятся в ваших картах сайта
  2. Вы установили флажок, чтобы использовать страницы в ваших картах сайта в качестве отправных точек для сканирования при настройке. проект в Ahrefs Site Audit.

Не уверены, что все страницы, которые вы хотите проиндексировать, есть в вашей карте сайта? Попробуйте следующее:

  1. Загрузите полный список страниц вашего сайта (через вашу CMS)
  2. Просканируйте ваш сайт (используя такой инструмент, как Ahrefs Site Audit)
  3. Сделайте перекрестные ссылки на два списка URL-адресов

Любые URL-адреса не обнаружены во время сканирования, являются потерянными страницами.

Вы можете исправить потерянные страницы одним из двух способов:

  1. Если страница не важна , удалите ее и удалите из карты сайта.
  2. Если страница важна , включите ее во внутреннюю структуру ссылок вашего веб-сайта.

6) Исправить внутренние ссылки nofollow

Ссылки Nofollow — это ссылки с тегом rel = «nofollow». Они предотвращают передачу PageRank на целевой URL. Google также не сканирует ссылки nofollow.

Вот что Google говорит по этому поводу:

По сути, с использованием nofollow заставляет нас отбрасывать целевые ссылки из нашего общего графа сети. Однако целевые страницы могут по-прежнему отображаться в нашем индексе, если другие сайты ссылаются на них без использования nofollow или если URL-адреса отправлены в Google в файле Sitemap.

Короче говоря, вы должны убедиться, что следуют все внутренние ссылки на индексируемые страницы.

Для этого используйте инструмент Ahrefs Site Audit для сканирования вашего сайта.Проверьте отчет Ссылки на наличие индексируемых страниц с ошибками «Страница имеет только входящие внутренние ссылки nofollow»:

Удалите тег nofollow из этих внутренних ссылок, предполагая, что вы хотите, чтобы Google проиндексировал страницу. Если нет, либо удалите страницу, либо не индексируйте ее.

Рекомендуемая литература: Что такое ссылка Nofollow? Все, что вам нужно знать (без жаргона!)

7) Добавьте «мощные» внутренние ссылки

Google обнаруживает новый контент, сканируя ваш веб-сайт.Если вы не укажете внутреннюю ссылку на рассматриваемую страницу, они не смогут ее найти.

Одно из простых решений этой проблемы — добавить на страницу несколько внутренних ссылок. Вы можете сделать это с любой другой веб-страницы, которую Google может сканировать и индексировать. Однако, если вы хотите, чтобы Google проиндексировал страницу как можно быстрее, имеет смысл сделать это с одной из ваших наиболее «мощных» страниц.

Почему? Потому что Google, вероятно, будет повторно сканировать такие страницы быстрее, чем менее важные страницы.

Для этого перейдите в раздел «Сайт» Ahrefs «, введите свой домен и откройте отчет» Лучшее по ссылкам «.

Здесь отображаются все страницы вашего веб-сайта, отсортированные по рейтингу URL (UR). Другими словами, сначала отображаются наиболее авторитетные страницы.

Просмотрите этот список и найдите соответствующие страницы, с которых можно добавить внутренние ссылки на рассматриваемую страницу.

Например, если бы мы хотели добавить внутреннюю ссылку на наше руководство по размещению гостевых сообщений, наше руководство по созданию ссылок, вероятно, предложило бы подходящее место для этого. Так получилось, что эта страница является 11-й по значимости страницей в нашем блоге:

Google увидит эту ссылку и перейдет по ней в следующий раз при повторном сканировании страницы.

pro tip

Вставьте страницу, с которой вы добавили внутреннюю ссылку, в инструмент проверки URL-адресов Google. Нажмите кнопку «Запросить индексирование», чтобы сообщить Google, что что-то на странице изменилось, и что они должны повторно сканировать это как можно скорее. Это может ускорить процесс обнаружения внутренней ссылки и, следовательно, страницы, которую вы хотите проиндексировать.

8) Убедитесь, что страница ценная и уникальная

Google вряд ли будет индексировать некачественные страницы, потому что они не представляют ценности для пользователей.Вот что сказал об индексировании в 2018 году Джон Мюллер из Google:

Мы никогда не индексируем все известные URL, это нормально. Я бы сфокусировался на том, чтобы сделать сайт потрясающим и вдохновляющим, тогда все обычно получается лучше.

— 🍌 John 🍌 (@JohnMu) 3 января 2018 г.

Он подразумевает, что если вы хотите, чтобы Google проиндексировал ваш веб-сайт или веб-страницу, он должен быть «потрясающим и вдохновляющим».

Если вы исключили технические проблемы из-за отсутствия индексации, то причиной может быть отсутствие ценности.По этой причине стоит просмотреть страницу свежим взглядом и спросить себя: действительно ли эта страница ценна? Сможет ли пользователь найти ценность на этой странице, если щелкнет по ней в результатах поиска?

Если ответ на любой из этих вопросов отрицательный, то вам необходимо улучшить свой контент.

Вы можете найти больше потенциально некачественных страниц, которые не проиндексированы, с помощью инструмента аудита сайта Ahrefs и профилировщика URL. Для этого перейдите в Page Explorer в Ahrefs Site Audit и используйте следующие настройки:

Это вернет «тонкие» страницы, которые можно индексировать и которые в настоящее время не получают органического трафика.Другими словами, есть большая вероятность, что они не проиндексированы.

Экспортируйте отчет, затем вставьте все URL-адреса в URL Profiler и запустите проверку индексации Google.

ВАЖНО

Рекомендуется использовать прокси, если вы делаете это для большого количества страниц (т. Е. Более 100). В противном случае вы рискуете, что ваш IP-адрес будет забанен Google. Если вы не можете этого сделать, другой альтернативой является поиск в Google «бесплатной массовой проверки индексации Google». Есть несколько таких инструментов, но большинство из них ограничено <25 страницами за раз.

Проверьте все не проиндексированные страницы на предмет проблем с качеством. При необходимости улучшите, а затем запросите переиндексацию в Google Search Console.

Вы также должны стремиться исправить проблемы с дублирующимся контентом. Google вряд ли проиндексирует повторяющиеся или почти повторяющиеся страницы. Используйте отчет Дублированное содержимое в Аудите сайта, чтобы проверить наличие этих проблем.

9) Удалите некачественные страницы (для оптимизации «краулингового бюджета»)

Наличие на вашем сайте слишком большого количества некачественных страниц приводит только к трате краулингового бюджета.

Вот что Google говорит по этому поводу:

Потеря ресурсов сервера на [малоценных страницах] приведет к истощению активности сканирования со страниц, которые действительно имеют ценность, что может вызвать значительную задержку в обнаружении отличного содержания на сайте. .

Думайте об этом как об учителе, оценивающем эссе, одно из которых ваше. Если им предстоит оценить десять эссе, они довольно быстро доберутся до вашего. Если у них будет сотня, им потребуется немного больше времени. Если у них тысячи, их рабочая нагрузка слишком высока, и они, возможно, никогда не дойдут до оценки вашего эссе.

Google заявляет, что «сканирование бюджета […] — это не то, о чем должно беспокоиться большинство издателей», и что «если на сайте меньше нескольких тысяч URL-адресов, в большинстве случаев он будет сканироваться эффективно».

Тем не менее, удаление некачественных страниц с вашего веб-сайта никогда не бывает плохим. Это может только положительно повлиять на краулинговый бюджет.

Вы можете использовать наш шаблон аудита контента, чтобы найти потенциально некачественные и нерелевантные страницы, которые можно удалить.

10) Создавайте качественные обратные ссылки

Обратные ссылки говорят Google, что веб-страница важна.В конце концов, если кто-то на него ссылается, значит, он должен иметь какую-то ценность. Это страницы, которые Google хочет проиндексировать.

Для полной прозрачности Google индексирует не только веб-страницы с обратными ссылками. Есть много (миллиарды) проиндексированных страниц без обратных ссылок. Однако, поскольку Google считает страницы с качественными ссылками более важными, они, скорее всего, будут сканировать — и повторно сканировать — такие страницы быстрее, чем страницы без них. Это приводит к более быстрой индексации.

У нас есть много ресурсов для создания качественных обратных ссылок в блоге.

Взгляните на несколько руководств ниже.

Индексирование ≠ ранжирование

Индексирование вашего веб-сайта или веб-страницы в Google не означает рейтинга или трафика.

Это разные вещи.

Индексирование означает, что Google знает о вашем веб-сайте. Это не значит, что они будут ранжировать его по каким-либо релевантным и стоящим запросам.

Вот где приходит на помощь SEO — искусство оптимизации ваших веб-страниц для ранжирования по конкретным запросам.

Короче говоря, SEO включает:

  • Поиск того, что ищут ваши клиенты;
  • Создание контента по этим темам;
  • Оптимизация этих страниц под ваши целевые ключевые слова;
  • Создание обратных ссылок;
  • Регулярно переиздайте контент, чтобы он оставался «вечнозеленым».”

Вот видео, которое поможет вам начать работу с SEO:

https: // www.youtube.com/watch?v=BNHR6IQJGZs

Когда вы что-то гуглите, вы просите Google вернуть все соответствующие страницы из их индекса. Поскольку часто есть миллионы страниц, отвечающих всем требованиям, алгоритм ранжирования Google делает все возможное, чтобы отсортировать страницы так, чтобы вы сначала увидели наилучшие и наиболее релевантные результаты.

Важным моментом, который я здесь подчеркиваю, является то, что , индексирование и , ранжирование — это две разные вещи .

Индексирование отображается для гонки; рейтинг выигрывает.

Невозможно выиграть, не заняв первое место в гонке.

Как проверить, проиндексированы ли вы в Google

Зайдите в Google, затем выполните поиск по сайту : yourwebsite.com

Это число примерно показывает, сколько ваших страниц проиндексировал Google.

Если вы хотите проверить статус индекса определенного URL, используйте тот же сайт : оператор yourwebsite.com/web-page-slug .

Никаких результатов не будет, если страница не проиндексирована.

Стоит отметить, что если вы пользователь Google Search Console, вы можете использовать отчет Покрытие , чтобы получить более точное представление о статусе индекса вашего веб-сайта. Просто перейдите по ссылке:

Google Search Console> Индекс> Покрытие

Посмотрите количество допустимых страниц (с предупреждениями и без них).

Если в сумме эти два числа не равны нулю, значит, Google проиндексировал по крайней мере некоторые страницы вашего веб-сайта. В противном случае у вас серьезная проблема, потому что ни одна из ваших веб-страниц не проиндексирована.

Примечание.

Не пользуетесь Google Search Console? Подписаться. Это бесплатно. Каждый, кто управляет веб-сайтом и заботится о привлечении трафика от Google, должен использовать Google Search Console. Это , что важно.

Вы также можете использовать Search Console, чтобы проверить, проиндексирована ли конкретная страница. Для этого вставьте URL-адрес в инструмент проверки URL-адресов.

Если эта страница проиндексирована, будет написано «URL находится в Google».

Если страница не проиндексирована, вы увидите слова «URL не в Google.”

Как получить индекс в Google

Вы обнаружили, что ваш веб-сайт или веб-страница не проиндексированы в Google? Попробуйте следующее:

  1. Перейдите в Google Search Console
  2. Перейдите к инструменту проверки URL
  3. Вставьте URL, который Google должен проиндексировать, в строку поиска.
  4. Подождите, пока Google проверит URL-адрес
  5. Нажмите кнопку «Запросить индексирование»

Этот процесс является хорошей практикой при публикации нового сообщения или страницы. Вы фактически сообщаете Google, что добавили что-то новое на свой сайт и что они должны это изучить.

Однако запрос индексации вряд ли решит основные проблемы, мешающие Google индексировать старые страницы. В этом случае следуйте приведенному ниже контрольному списку, чтобы диагностировать и устранить проблему.

Вот несколько быстрых ссылок на каждую тактику — на случай, если вы уже попробовали:

  1. Удалите блоки сканирования в файле robots.txt
  2. Удалите ложные теги noindex
  3. Включите страницу в карту сайта
  4. Удалите мошеннические канонические теги
  5. Убедитесь, что страница не осиротела
  6. Исправьте внутренние ссылки nofollow
  7. Добавьте «мощные» внутренние ссылки
  8. Убедитесь, что страница ценная и уникальная
  9. Удалите некачественные страницы (чтобы оптимизировать «краулинговый бюджет» )
  10. Создавайте качественные обратные ссылки

1) Удалите блоки сканирования в ваших роботах.txt

Google не индексирует весь ваш веб-сайт? Это могло произойти из-за блокировки сканирования в файле robots.txt.

Чтобы проверить наличие этой проблемы, перейдите по адресу yourdomain.com/robots.txt .

Найдите любой из этих двух фрагментов кода:

 User-agent: Googlebot
Disallow: / 
 Агент пользователя: *
Disallow: / 

Обе они сообщают роботу Googlebot, что им не разрешено сканировать какие-либо страницы вашего сайта. Чтобы решить проблему, удалите их.Это , что просто.

Блок сканирования в robots.txt также может быть причиной, если Google не индексирует одну веб-страницу. Чтобы проверить, так ли это, вставьте URL-адрес в инструмент проверки URL-адресов в Google Search Console. Нажмите на блок «Покрытие», чтобы получить более подробную информацию, затем найдите «Сканирование разрешено? Нет: заблокировано файлом robots.txt ».

Это означает, что страница заблокирована в robots.txt.

В таком случае еще раз проверьте файл robots.txt на наличие каких-либо запрещающих правил, относящихся к странице или соответствующему подразделу.

При необходимости удалите.

2) Удалите ложные теги noindex

Google не будет индексировать страницы, если вы им запретите. Это полезно для сохранения конфиденциальности некоторых веб-страниц. Это можно сделать двумя способами:

Метод 1: метатег

Страницы с любым из этих метатегов в разделе не будут проиндексированы Google:

  
  

Это метатег роботов, который сообщает поисковым системам, могут они или не могут индексировать страницу.

Примечание.

Ключевой частью является значение «noindex». Если вы это видите, значит для страницы задано значение noindex.

Чтобы найти все страницы с метатегом noindex на вашем сайте, запустите сканирование с помощью Ahrefs Site Audit. Перейдите к отчету Индексируемость . Ищите предупреждения «Страница Noindex».

Щелкните, чтобы увидеть все затронутые страницы. Удалите метатег noindex со всех страниц, которым он не принадлежит.

Метод 2: X ‑ Robots-Tag

Сканеры также учитывают заголовок HTTP-ответа X ‑ Robots-Tag.Вы можете реализовать это, используя язык сценариев на стороне сервера, такой как PHP, или в файле .htaccess, или изменив конфигурацию сервера.

Инструмент проверки URL в Search Console сообщает, заблокирован ли Google сканирование страницы из-за этого заголовка. Просто введите свой URL и найдите «Индексирование разрешено? Нет: «noindex» обнаружен в http-заголовке «X ‑ Robots-Tag»

Если вы хотите проверить наличие этой проблемы на своем сайте, запустите сканирование в инструменте аудита сайта Ahrefs, затем используйте «Информация о роботах в HTTP-заголовке. ”В проводнике страниц:

Попросите разработчика исключить страницы, которые вы хотите проиндексировать, из возврата этого заголовка.

Рекомендуемая литература: Спецификации метатега роботов и HTTP-заголовка X ‑ Robots-Tag

3) Включите страницу в карту сайта

Карта сайта сообщает Google, какие страницы на вашем сайте важны, а какие нет т. Это также может дать некоторые рекомендации о том, как часто их следует сканировать повторно.

Google должен иметь возможность находить страницы на вашем веб-сайте независимо от того, есть ли они в вашей карте сайта, но по-прежнему рекомендуется включать их.В конце концов, нет смысла усложнять жизнь Google.

Чтобы проверить, есть ли страница в вашей карте сайта, используйте инструмент проверки URL в Search Console. Если вы видите ошибку «URL не в Google» и «Sitemap: N / A», значит, его нет в вашей карте сайта или он не проиндексирован.

Не используете Search Console? Перейдите по URL-адресу карты сайта — обычно yourdomain.com/sitemap.xml — и выполните поиск страницы.

Или, если вы хотите найти все просканируемые и индексируемые страницы, которых нет в вашей карте сайта, запустите сканирование в Ahrefs Site Audit.Перейдите в Page Explorer и примените эти фильтры:

Эти страницы должны быть в вашей карте сайта, поэтому добавьте их. После этого сообщите Google, что вы обновили карту сайта, выполнив ping по этому URL-адресу:

http://www.google.com/ping?sitemap=http://yourwebsite.com/sitemap_url.xml

Replace эту последнюю часть с URL-адресом вашей карты сайта. Вы должны увидеть что-то вроде этого:

Это должно ускорить индексацию страницы Google.

4) Удалите ложные канонические теги

Канонический тег сообщает Google, какая версия страницы является предпочтительной.Выглядит это примерно так:

Большинство страниц либо не имеют канонического тега, либо так называемого канонического тега, ссылающегося на себя. Это говорит Google сама страница является предпочтительной и, вероятно, единственной версией. Другими словами, вы хотите, чтобы эта страница была проиндексирована.

Но если на вашей странице есть ложный канонический тег, то он может сообщать Google о предпочтительной версии этой страницы, которая не существует. В этом случае ваша страница не будет проиндексирована.

Чтобы проверить каноничность, воспользуйтесь инструментом Google для проверки URL. Вы увидите предупреждение «Альтернативная страница с каноническим тегом», если канонический тег указывает на другую страницу.

Если этого не должно быть и вы хотите проиндексировать страницу, удалите канонический тег.

ВАЖНО

Канонические теги не всегда плохи. У большинства страниц с этими тегами есть причины. Если вы видите, что ваша страница имеет канонический набор, проверьте каноническую страницу. Если это действительно предпочтительная версия страницы и нет необходимости также индексировать данную страницу, то канонический тег должен остаться.

Если вы хотите быстро найти ложные канонические теги на всем сайте, запустите сканирование с помощью инструмента аудита сайта Ahrefs. Перейдите в проводник страниц. Используйте следующие настройки:

Это ищет страницы в вашей карте сайта с несамодвижущимися каноническими тегами. Поскольку вы почти наверняка захотите проиндексировать страницы в карте сайта, вам следует дополнительно изучить, возвращает ли этот фильтр какие-либо результаты.

Весьма вероятно, что у этих страниц либо неверный канонический файл, либо их вообще не должно быть в вашей карте сайта.

5) Убедитесь, что страница не «осиротевшая».

Сиротские страницы — это страницы, на которые не указывают внутренние ссылки.

Поскольку Google обнаруживает новое содержание, сканируя Интернет, они не могут обнаружить потерянные страницы с помощью этого процесса. Посетители веб-сайта тоже не смогут их найти.

Чтобы проверить наличие лишних страниц, просканируйте свой сайт с помощью Ahrefs Site Audit. Затем проверьте отчет Ссылки на наличие ошибок «Неисправная страница (нет входящих внутренних ссылок)»:

Здесь показаны все страницы, которые одновременно индексируются и присутствуют в вашей карте сайта, но не имеют внутренних ссылок, указывающих на них.

ВАЖНО

Этот процесс работает только в том случае, если верны два условия:

  1. Все страницы, которые вы хотите проиндексировать, находятся в ваших картах сайта
  2. Вы установили флажок, чтобы использовать страницы в ваших картах сайта в качестве отправных точек для сканирования при настройке. проект в Ahrefs Site Audit.

Не уверены, что все страницы, которые вы хотите проиндексировать, есть в вашей карте сайта? Попробуйте следующее:

  1. Загрузите полный список страниц вашего сайта (через вашу CMS)
  2. Просканируйте ваш сайт (используя такой инструмент, как Ahrefs Site Audit)
  3. Сделайте перекрестные ссылки на два списка URL-адресов

Любые URL-адреса не обнаружены во время сканирования, являются потерянными страницами.

Вы можете исправить потерянные страницы одним из двух способов:

  1. Если страница не важна , удалите ее и удалите из карты сайта.
  2. Если страница важна , включите ее во внутреннюю структуру ссылок вашего веб-сайта.

6) Исправить внутренние ссылки nofollow

Ссылки Nofollow — это ссылки с тегом rel = «nofollow». Они предотвращают передачу PageRank на целевой URL. Google также не сканирует ссылки nofollow.

Вот что Google говорит по этому поводу:

По сути, с использованием nofollow заставляет нас отбрасывать целевые ссылки из нашего общего графа сети. Однако целевые страницы могут по-прежнему отображаться в нашем индексе, если другие сайты ссылаются на них без использования nofollow или если URL-адреса отправлены в Google в файле Sitemap.

Короче говоря, вы должны убедиться, что следуют все внутренние ссылки на индексируемые страницы.

Для этого используйте инструмент Ahrefs Site Audit для сканирования вашего сайта.Проверьте отчет Ссылки на наличие индексируемых страниц с ошибками «Страница имеет только входящие внутренние ссылки nofollow»:

Удалите тег nofollow из этих внутренних ссылок, предполагая, что вы хотите, чтобы Google проиндексировал страницу. Если нет, либо удалите страницу, либо не индексируйте ее.

Рекомендуемая литература: Что такое ссылка Nofollow? Все, что вам нужно знать (без жаргона!)

7) Добавьте «мощные» внутренние ссылки

Google обнаруживает новый контент, сканируя ваш веб-сайт.Если вы не укажете внутреннюю ссылку на рассматриваемую страницу, они не смогут ее найти.

Одно из простых решений этой проблемы — добавить на страницу несколько внутренних ссылок. Вы можете сделать это с любой другой веб-страницы, которую Google может сканировать и индексировать. Однако, если вы хотите, чтобы Google проиндексировал страницу как можно быстрее, имеет смысл сделать это с одной из ваших наиболее «мощных» страниц.

Почему? Потому что Google, вероятно, будет повторно сканировать такие страницы быстрее, чем менее важные страницы.

Для этого перейдите в раздел «Сайт» Ahrefs «, введите свой домен и откройте отчет» Лучшее по ссылкам «.

Здесь отображаются все страницы вашего веб-сайта, отсортированные по рейтингу URL (UR). Другими словами, сначала отображаются наиболее авторитетные страницы.

Просмотрите этот список и найдите соответствующие страницы, с которых можно добавить внутренние ссылки на рассматриваемую страницу.

Например, если бы мы хотели добавить внутреннюю ссылку на наше руководство по размещению гостевых сообщений, наше руководство по созданию ссылок, вероятно, предложило бы подходящее место для этого. Так получилось, что эта страница является 11-й по значимости страницей в нашем блоге:

Google увидит эту ссылку и перейдет по ней в следующий раз при повторном сканировании страницы.

pro tip

Вставьте страницу, с которой вы добавили внутреннюю ссылку, в инструмент проверки URL-адресов Google. Нажмите кнопку «Запросить индексирование», чтобы сообщить Google, что что-то на странице изменилось, и что они должны повторно сканировать это как можно скорее. Это может ускорить процесс обнаружения внутренней ссылки и, следовательно, страницы, которую вы хотите проиндексировать.

8) Убедитесь, что страница ценная и уникальная

Google вряд ли будет индексировать некачественные страницы, потому что они не представляют ценности для пользователей.Вот что сказал об индексировании в 2018 году Джон Мюллер из Google:

Мы никогда не индексируем все известные URL, это нормально. Я бы сфокусировался на том, чтобы сделать сайт потрясающим и вдохновляющим, тогда все обычно получается лучше.

— 🍌 John 🍌 (@JohnMu) 3 января 2018 г.

Он подразумевает, что если вы хотите, чтобы Google проиндексировал ваш веб-сайт или веб-страницу, он должен быть «потрясающим и вдохновляющим».

Если вы исключили технические проблемы из-за отсутствия индексации, то причиной может быть отсутствие ценности.По этой причине стоит просмотреть страницу свежим взглядом и спросить себя: действительно ли эта страница ценна? Сможет ли пользователь найти ценность на этой странице, если щелкнет по ней в результатах поиска?

Если ответ на любой из этих вопросов отрицательный, то вам необходимо улучшить свой контент.

Вы можете найти больше потенциально некачественных страниц, которые не проиндексированы, с помощью инструмента аудита сайта Ahrefs и профилировщика URL. Для этого перейдите в Page Explorer в Ahrefs Site Audit и используйте следующие настройки:

Это вернет «тонкие» страницы, которые можно индексировать и которые в настоящее время не получают органического трафика.Другими словами, есть большая вероятность, что они не проиндексированы.

Экспортируйте отчет, затем вставьте все URL-адреса в URL Profiler и запустите проверку индексации Google.

ВАЖНО

Рекомендуется использовать прокси, если вы делаете это для большого количества страниц (т. Е. Более 100). В противном случае вы рискуете, что ваш IP-адрес будет забанен Google. Если вы не можете этого сделать, другой альтернативой является поиск в Google «бесплатной массовой проверки индексации Google». Есть несколько таких инструментов, но большинство из них ограничено <25 страницами за раз.

Проверьте все не проиндексированные страницы на предмет проблем с качеством. При необходимости улучшите, а затем запросите переиндексацию в Google Search Console.

Вы также должны стремиться исправить проблемы с дублирующимся контентом. Google вряд ли проиндексирует повторяющиеся или почти повторяющиеся страницы. Используйте отчет Дублированное содержимое в Аудите сайта, чтобы проверить наличие этих проблем.

9) Удалите некачественные страницы (для оптимизации «краулингового бюджета»)

Наличие на вашем сайте слишком большого количества некачественных страниц приводит только к трате краулингового бюджета.

Вот что Google говорит по этому поводу:

Потеря ресурсов сервера на [малоценных страницах] приведет к истощению активности сканирования со страниц, которые действительно имеют ценность, что может вызвать значительную задержку в обнаружении отличного содержания на сайте. .

Думайте об этом как об учителе, оценивающем эссе, одно из которых ваше. Если им предстоит оценить десять эссе, они довольно быстро доберутся до вашего. Если у них будет сотня, им потребуется немного больше времени. Если у них тысячи, их рабочая нагрузка слишком высока, и они, возможно, никогда не дойдут до оценки вашего эссе.

Google заявляет, что «сканирование бюджета […] — это не то, о чем должно беспокоиться большинство издателей», и что «если на сайте меньше нескольких тысяч URL-адресов, в большинстве случаев он будет сканироваться эффективно».

Тем не менее, удаление некачественных страниц с вашего веб-сайта никогда не бывает плохим. Это может только положительно повлиять на краулинговый бюджет.

Вы можете использовать наш шаблон аудита контента, чтобы найти потенциально некачественные и нерелевантные страницы, которые можно удалить.

10) Создавайте качественные обратные ссылки

Обратные ссылки говорят Google, что веб-страница важна.В конце концов, если кто-то на него ссылается, значит, он должен иметь какую-то ценность. Это страницы, которые Google хочет проиндексировать.

Для полной прозрачности Google индексирует не только веб-страницы с обратными ссылками. Есть много (миллиарды) проиндексированных страниц без обратных ссылок. Однако, поскольку Google считает страницы с качественными ссылками более важными, они, скорее всего, будут сканировать — и повторно сканировать — такие страницы быстрее, чем страницы без них. Это приводит к более быстрой индексации.

У нас есть много ресурсов для создания качественных обратных ссылок в блоге.

Взгляните на несколько руководств ниже.

Индексирование ≠ ранжирование

Индексирование вашего веб-сайта или веб-страницы в Google не означает рейтинга или трафика.

Это разные вещи.

Индексирование означает, что Google знает о вашем веб-сайте. Это не значит, что они будут ранжировать его по каким-либо релевантным и стоящим запросам.

Вот где приходит на помощь SEO — искусство оптимизации ваших веб-страниц для ранжирования по конкретным запросам.

Короче говоря, SEO включает:

  • Поиск того, что ищут ваши клиенты;
  • Создание контента по этим темам;
  • Оптимизация этих страниц под ваши целевые ключевые слова;
  • Создание обратных ссылок;
  • Регулярно переиздайте контент, чтобы он оставался «вечнозеленым».”

Вот видео, которое поможет вам начать работу с SEO:

… и некоторые статьи:

Заключительные мысли

Есть только две возможные причины, по которым Google не индексирует ваш веб-сайт или веб-страницу:

  1. Им мешают технические проблемы
  2. Они считают ваш сайт или страницу некачественными и бесполезными для своих пользователей.

Вполне возможно, что существуют обе эти проблемы.Однако я бы сказал, что технические проблемы встречаются гораздо чаще. Технические проблемы также могут привести к автоматическому созданию индексируемого некачественного контента (например, проблемы с фасетной навигацией). Это нехорошо.

Тем не менее, выполнение приведенного выше контрольного списка должно решить проблему индексации в девяти случаях из десяти.

Просто помните, что индексирование ≠ ранжирование. SEO по-прежнему жизненно важен, если вы хотите ранжироваться по любым полезным поисковым запросам и привлекать постоянный поток органического трафика.

Попросите Google повторно сканировать ваш веб-сайт

Если вы недавно добавляли или вносили изменения на страницу своего сайта, вы можете запросить, чтобы Google повторно проиндексируйте свою страницу, используя любой из перечисленных здесь методов.Вы не можете запросить индексацию для URL что вам не удается.

Вы используете размещенную платформу управления контентом (например, Blogger или WordPress)? В в большинстве случаев платформа автоматически отправляет ваш новый контент в поисковые системы. Проверьте свои статьи поддержки платформы.

Общие указания

  • Сканирование может занять от нескольких дней до нескольких недель. Будьте терпеливы и следите за прогрессом используя индекс Отчет о состоянии или URL Инструмент для осмотра.
  • Все описанные здесь методы имеют примерно одинаковое время отклика.
  • Существует квота на отправку отдельных URL-адресов.
  • Если запросить повторное сканирование для одного и того же URL-адреса или карты сайта несколько раз, он не просканируется. Быстрее.

Методы запроса сканирования

Используйте инструмент проверки URL-адресов (всего несколько URL-адресов)

Примечание: Вы должны быть владельцем или полноправный пользователь свойства Search Console, чтобы иметь возможность запросить индексацию в инструменте проверки URL.

Используйте URL Инструмент проверки для запроса сканирования отдельных URL-адресов. Обратите внимание: если у вас большие числа URL-адресов, вместо этого отправьте карту сайта.

Чтобы отправить URL в индекс:

  1. Следуйте общим рекомендациям.
  2. Проверьте URL-адрес , используя URL-адрес Инструмент для осмотра.
  3. Выбрать Запросить индексирование . Инструмент запустит живую проверку URL-адреса, чтобы увидеть есть ли у него какие-либо очевидные проблемы с индексацией, и если нет, страница будет поставлена ​​в очередь для индексации.Если инструмент обнаружит проблемы со страницей, попробуйте их исправить.
Запрос на сканирование не гарантирует, что включение в результаты поиска произойдет мгновенно. или даже вообще. Наши системы отдают предпочтение быстрому размещению качественного и полезного контента.

Отправить карту сайта (сразу несколько URL)

Карта сайта — это важный способ для Google обнаружить URL-адреса на вашем сайте. Карта сайта также может включать дополнительные метаданные о версиях на других языках, видео, изображениях или новостные страницы.Узнайте, как создать и отправить карта сайта.

Отправить отзыв о документации

Как заставить Google быстрее индексировать мой сайт? (Как отправить URL-адреса)

Индексация сайта может показаться довольно пассивной задачей.

Просто напишите контент, оптимизируйте его для поисковых систем, загрузите на свой сайт и просто дождитесь волшебства, верно?

Не обязательно.

Как можно быстрее разместить свой контент в Google? Как заставить Google индексировать обновленные страницы?

Процесс индексации Google очень эффективен, но несовершенен.

И учитывая, что невозможно достичь ваших маркетинговых целей, если ваши страницы не проиндексированы, индексацию не следует оставлять на волю случая.

К счастью, есть много шагов, которые вы можете предпринять, чтобы помочь Google быстро и точно проиндексировать ваши страницы.

В этом посте я расскажу о девяти способах более активного подхода к индексации своего сайта и, как следствие, улучшения видимости вашего сайта в Интернете.

Вы узнаете, как заставить Google проиндексировать ваш веб-сайт и как проверить свой рейтинг в индексе Google.

Но сначала давайте сделаем шаг назад и посмотрим, что такое индексация , и почему она играет такую ​​важную роль в результатах вашего цифрового маркетинга.

Что такое индексация Google?

Прежде чем мы перейдем к способам ускорения процесса индексации, важно понять, что именно такое индексация.

Что такое веб-индекс?

В своей основной форме index — это список информации. Задолго до Интернета индексы существовали во многих формах, например, алфавитные указатели в конце книг.

Таким образом, веб-индекс — это база данных информации в Интернете.

Поисковые системы используют эти базы данных для хранения миллиардов страниц информации. Таким образом, когда вы используете поисковую систему, вы на самом деле не ищите все, что существует в Интернете.

Вы ищете в индексе этой поисковой системы, где хранятся страницы и информация.

Боты или «пауки» сканируют новые страницы в Интернете и сохраняют их в индексе, основанном на их тематике, релевантности, авторитете и многом другом.

Как работает индекс Google?

У каждой поисковой системы есть свой индекс. Но поскольку Google является крупнейшей поисковой системой в мире и на которой большинство маркетологов сосредотачивают свои стратегии SEO, мы собираемся сосредоточиться на их.

В 2016 году Google утверждал, что знает более 130 триллионов отдельных страниц.

Сегодня он не указывает точно, сколько страниц находится в его индексе, но говорит, что его алгоритм поиска сортирует « сотен миллиардов » страниц в своем индексе, чтобы предоставить полезные и релевантные результаты.

Как Google индексирует Интернет?

Для создания библиотеки с миллиардами страниц требуются мощные инструменты.

Самые важные из этих инструментов называются пауками. Эти автоматизированные боты представляют собой автоматизированные браузеры, которые «ползают» с сайта на сайт , переходя по ссылкам для поиска контента.

Вся информация, которую сканируют эти пауки, хранится в индексе Google.

Затем, когда пользователь выполняет поиск, алгоритм поиска Google выполняет сортировку по своей гигантской базе данных, чтобы найти наиболее релевантные страницы.

Получение информации из этой установленной базы данных (вместо попытки поиска информации в реальном времени) позволяет поисковой системе быстро и эффективно предоставлять результаты.

Пауки Google постоянно ищут новую информацию и обновляют свою базу данных.

Несмотря на то, что результаты берутся из сохраненного источника, цель поисковой системы — всегда предоставлять актуальные результаты.

Поэтому, когда вы добавляете новый контент, в ваших интересах, чтобы он был проиндексирован как можно быстрее.

Почему это важно, если ваш сайт быстро индексируется в Google?

Учитывая, что пауки Google постоянно ищут информацию, вы можете задаться вопросом, зачем вам нужно прикладывать дополнительные усилия, чтобы помочь им.

В конце концов, если они уже сканируют, все равно не найдут ли они ваш сайт?

Дело в том, что они могли бы.

Но если ваш сайт относительно новый или его не сканируют часто, проиндексирование вашего нового содержания может занять несколько дней или даже недель.

Это вызывает задержки в поисковой системе видимости — что является одним из наиболее важных факторов успеха вашего цифрового маркетинга.

Вы можете привлекать трафик из самых разных источников, но если учесть, что 51% всего отслеживаемого трафика веб-сайтов поступает из обычного поиска, невозможно отрицать, что ваше присутствие в поиске может принести вам успех или помешать ему.

[tweet_box design = ”default”] Обычный поиск может серьезно повлиять на ваш трафик, но вы не увидите этот трафик, пока ваш сайт не будет проиндексирован.[/ tweet_box]

Индексация необходима для создания рейтингов, привлечения трафика и достижения ваших целей для вашего сайта.

Google, вероятно, проиндексирует ваш веб-сайт в любом случае, если вы специально не предприняли никаких действий по отказу от индексации (о чем мы поговорим позже).

Но вы хотите, чтобы ваш сайт быстро проиндексировался .

Чем раньше ваши страницы будут проиндексированы, тем быстрее они начнут конкурировать за первые места в результатах поиска и занять их.

Учтите, что только 5,7% вновь опубликованных страниц попадают в первую десятку результатов за год.

Совершенно очевидно, что высокие позиции не происходят в одночасье. Эти данные показывают, что Google предпочитает уже существующий контент.

Фактически, средний рейтинг первой страницы составляет за два года , а средняя страница на первой позиции составляет почти трехлетней давности .

Нельзя сказать, что новые страницы , конечно, не могут иметь высокий рейтинг .Но быстро попасть на первое место — редкость.

Фактически, из всех страниц, занимающих первое место, менее двух процентов были моложе года.

Чем раньше будут проиндексированы ваши страницы, тем быстрее они начнут соревноваться за первые места.

Это особенно важно для новых веб-сайтов. Если у Google нет записей о сайте, его пауки не могут просто переходить по внутренним ссылкам для поиска новых страниц.

Таким образом, в то время как другие сайты продолжают добавлять новые страницы в свою базу данных, ваш сайт может быть проигнорирован.

То же самое верно и при смене доменного имени. Даже если вы перенесете всего своего контента, Google будет рассматривать ваш новый домен как совершенно новый сайт.

Например, когда Podia (ранее Coach) недавно провел ребрендинг и принял новое имя, они также изменили свое доменное имя, чтобы отразить это. Их услуги остались в основном такими же, как и содержание их сайтов.

Но Google не может сразу распознать, когда сайт просто переключается на новое место.

Таким образом, даже несмотря на то, что клиент мог определить, что это был именно тот сайт, который он искал, ему необходимо было предпринять шаги, чтобы гарантировать, что Google сможет привлечь туда этих пользователей.

Google помогает в этом процессе, позволяя веб-мастерам, которые меняют домен, заполнить форму «Смена адреса».

Но помимо этого, вы можете предпринять множество других шагов, чтобы убедиться, что ваш контент индексируется как можно быстрее и эффективнее.

Как заставить Google индексировать мой сайт с помощью этих инструментов SEO: Google Search Console и Yoast

Правильная индексация вашего сайта может показаться сложной задачей.

И правда в том, что иногда это может быть, но для упрощения процесса доступно множество инструментов, многие из которых чрезвычайно удобны для пользователя.

Вы можете использовать множество опций, предлагающих расширенные функции и возможности, но двумя наиболее важными и широко используемыми являются Google Search Console и Yoast SEO.

Google Search Console — это бесплатный инструмент, который помогает отслеживать присутствие вашего сайта в индексе Google и результатах поиска.Вы можете использовать его, чтобы убедиться, что Google может получить доступ к вашему контенту, отправить новый контент, а также отслеживать и решать любые проблемы.

Yoast SEO — это бесплатный плагин WordPress, предназначенный для простой оптимизации сайтов для поиска. Если вы запускаете сайт WordPress, это один из лучших инструментов, который вы можете использовать для улучшения своего присутствия в поиске, и на данный момент он в основном считается важным инструментом.

Если вы уже знакомы с этими инструментами, не стесняйтесь переходить к следующему разделу с девятью советами, которые вы можете использовать для улучшения индексации.

Google Search Console

Google Search Console (ранее известная как Google Webmaster Tools) — один из наиболее ценных инструментов SEO, имеющихся в вашем распоряжении, и он совершенно бесплатный.

Вы можете использовать его, чтобы следить за многими различными аспектами видимости вашего поиска. Но ради индексации вы можете использовать его для отслеживания сканирования, ошибок индекса и проблем безопасности.

Если у вас еще нет учетной записи, перейдите в Search Console и войдите в свою учетную запись Google.

Если у вас уже есть учетная запись Google Analytics, зарегистрируйтесь с тем же адресом электронной почты. Это упростит процесс и упростит хранение всей вашей информации в одном месте.

Создав учетную запись, нажмите кнопку «Добавить ресурс» в правом верхнем углу.

Введите свое доменное имя и нажмите «Добавить».

После этого вы попадете на страницу с инструкциями по подтверждению вашего права собственности на собственность.

Если вы выберете подтверждение с помощью загрузки файла HTML, вы увидите файл HTML, доступный для загрузки.

Загрузите файл подтверждения, затем используйте FTP, чтобы загрузить его в корневой каталог.

После того, как вы загрузили файл, вы можете проверить его, открыв целевой URL в браузере. Если вы видите имя файла в окне браузера, загрузка завершена. Вернитесь в Search Console и нажмите «Подтвердить».

После завершения этого шага вы сможете получить доступ к данным Search Console. Однако важно отметить, что вам необходимо оставить файл подтверждения на своем сайте.Даже после первоначальной проверки этот файл показывает Google, что вы являетесь правильным владельцем.

Если у вас возникли проблемы с подтверждением своего сайта с помощью файла HTML — или если вы просто предпочитаете проверить другой способ — вы можете использовать несколько других вариантов.

Если у вас уже есть учетная запись Google Analytics, это простой вариант. Убедитесь, что вы вошли в систему с той же учетной записью Google, которую используете для Analytics, выберите «Google Analytics» и нажмите «Подтвердить».

После аутентификации своей учетной записи вы можете ознакомиться с несколькими основными функциями.

Установите предпочтительный домен

Одно из самых простых исправлений, которое вы вносите в целях индексации, — это установка предпочтительного домена.

Пользователи могут зайти на ваш сайт, набрав ваше доменное имя с или без WWW перед ним. Это может показаться не проблемой, но Google рассматривает WWW и не WWW версии вашего домена как разные сайты.

Если вы не сообщите Google, что это ваш сайт (и какой из них вы предпочитаете), возможно, одно и то же содержание индексируется по разным URL-адресам.Это может создать некоторые раздражающие, но легко устранимые проблемы.

Установка предпочтительного домена сообщает Google, какую версию вы предпочитаете, и гарантирует, что все ваши страницы проиндексированы в правильном месте.

К счастью, это тоже несложный процесс.

Во-первых, добавьте все версии вашего домена, выполнив тот же процесс, что и выше. Убедитесь, что вы добавили как WWW, так и не WWW версии, а также их версии HTTP и HTTPS, если у вас включен HTTPS.

Это означает, что многие владельцы сайтов имеют четыре свойства для одного сайта:

  • http: // www.yourdomain.com
  • https://www.yourdomain.com
  • http://yourdomain.com
  • https://yourdomain.com

После добавления всех версий своего домена щелкните значок шестеренки и выберите «Настройки сайта».

Вверху страницы у вас будет возможность определить, какую версию вашего сайта вы хотите, чтобы Google распознал.

Таким образом, если другой сайт ссылается на WWW-версию вашего сайта, но вы предпочитаете версию, отличную от WWW, Google будет знать, что ссылка должна быть связана с версией, которую вы предпочитаете.

Версия, которую вы используете, по существу субъективна.

Владельцы сайтов обсуждали лет , что лучше, но нет никаких указаний на то, что выбор одной версии лучше другой для целей SEO. Важно просто выбрать одно — неважно, какой именно.

После того, как вы указали предпочтительный домен, вы можете начать использовать многие функции, доступные в Search Console. Но для целей этой публикации наиболее важными являются те, которые перечислены в разделах «Индекс Google» и «Сканирование» в левом меню.

Индекс Статус

Отчет о статусе индекса показывает, сколько ваших URL-адресов Google проиндексировал за последний год.

Этот отчет позволяет легко определить, находит ли и индексирует ли Google ваши страницы.

Вы также можете проверить вкладку «Дополнительно», чтобы узнать, сколько страниц вашего сайта было заблокировано вашим файлом robots.txt (о чем мы поговорим позже).

Если вы намеренно запрещаете Google индексировать определенные страницы, эта вкладка сообщит вам, что вы правильно настроили блоки.

И если вы, , не хотите, чтобы запрещал Google индексировать определенные страницы, эта вкладка сообщит вам, если есть проблема.

Удалить URL-адреса

Если вы когда-нибудь захотите временно удалить принадлежащий вам URL-адрес из результатов поиска, вы можете сделать это с помощью функции «Удалить URL-адреса».

Это не приведет к окончательному удалению страницы из результатов поиска, но может быть полезно для страниц, которые находятся в стадии разработки или на которые вы не хотите привлекать трафик по какой-либо другой причине.

Ошибки сканирования

Отчеты об ошибках сканирования дают вам краткий обзор любых проблем с сайтом или URL за последние 90 дней.

Это позволяет легко выявлять и исправлять проблемы, которые могут препятствовать индексации и ранжированию ваших страниц.

Статистика сканирования

Отчет «Статистика сканирования» показывает активность Google на вашем сайте за предыдущий 90-дневный период, включая страницы, просканированные за день, количество загружаемых килобайт в день и время, потраченное на загрузку страницы.

График страниц в день вверху, пожалуй, самый важный из трех, поскольку он показывает, как часто Google сканирует и индексирует ваш контент.

Чем больше Google просканирует ваш сайт, тем лучше.

Хотя вы не можете напрямую повлиять на скорость сканирования вашего сайта, вы можете с уверенностью предположить, что если Google сканирует ваш сайт с постоянной скоростью, ваш сайт находится в хорошем состоянии.

Если вы видите внезапное падение, это может указывать на проблему, например, неработающие ссылки или неподдерживаемый контент.Отслеживание этой частоты может помочь вам определить потенциальные проблемы до того, как они превратятся в настоящие.

Йоаст

Если ваш сайт работает на WordPress, Yoast SEO — важный плагин. Он разработан, чтобы упростить поисковую оптимизацию для пользователей WordPress и не требует каких-либо технических знаний или навыков программирования.

Yoast предлагает платную премиум-версию с расширенными функциями, но ее бесплатная версия имеет множество функций для большинства пользователей. Все советы, которые мы упоминаем в этом посте, можно выполнить в бесплатной версии.

Если вы еще не установили его, войдите в свою панель управления WordPress и выберите «Плагины».

Выберите «Добавить новый», затем найдите Yoast в строке поиска.

Нажмите кнопку «Установить сейчас», чтобы загрузить и установить плагин, затем следуйте инструкциям, чтобы активировать его.

Yoast упрощает многие этапы оптимизации вашего сайта.

Например, будет автоматически анализировать ваше внутреннее SEO для каждого нового сообщения, которое вы добавляете, и поможет вам определить проблемы с тегом заголовка, метаописанием и удобочитаемостью.

Есть тонн функций, которые стоит изучить , но для индексации наиболее важным является модуль XML Sitemaps.

Щелкните значок Yoast в строке меню, затем выберите «XML Sitemaps».

Затем переключите функцию карты сайта XML на «Включено».

Параметры по умолчанию подходят для большинства пользователей, но если у вас есть определенные предпочтения относительно того, как настроен ваш, вы можете установить их здесь.

Затем нажмите «Сохранить изменения».”

Поздравляю! У вас есть карта сайта. Продолжайте читать, чтобы узнать, что с этим делать.

Как проиндексировать ваш сайт в Google

1. Создайте карту сайта

Как следует из названия, карта сайта — это карта вашего сайта. Это документ в формате XML, который сообщает поисковым роботам, куда им можно, а что нельзя.

Сканер просматривает эту страницу, чтобы узнать все о вашем веб-сайте — насколько он велик, какие страницы наиболее важны и где находится новый контент.Карта сайта в формате XML — важнейший первый ингредиент успешной индексации.

Пауки умны, но им действительно нужна карта.

Почему?

Без карты сайта сканирование может занять много времени — до 24 часов, чтобы проиндексировать новое сообщение в блоге или веб-сайт.

Это слишком долго.

С помощью карты сайта вы можете сократить это время до нескольких минут.

Правильно: ваш веб-сайт, блог или новая страница могут быть проиндексированы Google менее чем за час.

Ваша карта сайта также сообщает Google, как часто нужно искать изменения и новые страницы на вашем сайте. Если вы не обновляете или не добавляете новый контент часто, возможно, ваш сайт не будет сканироваться каждые несколько часов.

Но если вы добавляете несколько сообщений в блог каждую неделю, регулярно добавляете страницы с новыми продуктами или публикуете срочные новостные статьи, вы захотите сообщить Google, чтобы он сканировал и индексировал ваш сайт чаще.

К счастью, создать карту сайта часто проще, чем звуки.Если вы используете указанный выше плагин Yoast, вы можете перейти к следующему шагу.

А если нет, есть несколько других инструментов, которые могут сканировать ваш сайт и давать аналогичные результаты.

Кричащая лягушка

Один из лучших вариантов для создания карты сайта XML — Screaming Frog .

Чтобы использовать Screaming Frog, сначала загрузите их инструмент SEO Spider.

Если на вашем сайте меньше 500 страниц, это совершенно бесплатно.

Если ваш сайт больше, вам нужно будет купить лицензию, которая может окупиться, если учесть время, которое потребуется, чтобы вручную найти и перечислить более 500 URL-адресов.

После того, как вы установили программу , введите свой URL-адрес в поле «Введите URL-адрес для паука» и нажмите «Пуск».

Затем нажмите «Карты сайта»> «Создать XML-карту сайта».

Перед тем, как создать карту сайта, вы можете настроить несколько параметров.

Во-первых, вам нужно определить, какие страницы вы хотите включить, а какие — исключить.

По умолчанию будут включены только страницы с ответом «200» OK от сканирования, поэтому вам не нужно беспокоиться о перенаправлениях или неработающих ссылках.

Тем не менее, вы можете прокрутить список страниц и найти дублированный контент. Например, в вашей карте сайта нет необходимости иметь как WWW, так и не WWW версии URL.

Вы можете решить эту проблему, щелкнув правой кнопкой мыши версию, которую хотите удалить, и выбрав «Удалить».

Если ваши страницы различаются по важности, вы можете выбрать установку значений приоритета для разных URL-адресов. Ваши URL-адреса могут находиться в диапазоне от 0,0 до 1,0, значение по умолчанию — 0,5.

Это сообщает Google, какие страницы являются наиболее важными, чтобы они могли сканировать и индексировать эти страницы чаще.

Важно отметить, однако, что установка значений приоритета , а не не влияет на ваш рейтинг, поэтому вам не будет никакой пользы от попытки обыгрывать систему здесь.

Затем вы можете сообщить Google, как часто каждая страница вашего сайта может изменяться. Это сигнализирует поисковым роботам, что им следует сосредоточиться на сканировании страниц, которые часто обновляются.

Установка частоты изменения сотен страниц может быть утомительной, но вы можете использовать функцию «Вычислить из последнего измененного заголовка» Screaming Frog для автоматизации процесса.

Это означает, что если заголовок страницы был изменен в предыдущие 24 часа, частота его изменения будет ежедневной, а если она не обновлялась в последнее время, она будет установлена ​​ежемесячно.

Наконец, вы можете определить, хотите ли вы включать изображения в карту сайта. Если выбран параметр «Включить изображения», все изображения на вашем сайте будут включены по умолчанию.

Вы можете исключить изображения, такие как ваш логотип и значки социальных сетей, но включить фотографии продуктов и другую важную графику.

По завершении настройки нажмите «Далее», чтобы сгенерировать карту сайта. Сохраните его на свой компьютер и дважды проверьте размер.

Карта сайта не может содержать более 50 000 URL-адресов или иметь размер более 50 МБ, поэтому, если ваш файл нарушает любое из этих правил, он может быть разделен на два отдельных файла.

Но если вы получите файл подходящего размера, загрузите его в корневую папку вашего сайта через FTP-клиент.

Тогда переходите к следующему шагу!

Google XML Sitemaps

Google XML Sitemaps — еще один бесплатный плагин для сайтов WordPress.Если вы не используете Yoast, это простой способ создать карту сайта с настраиваемыми параметрами, похожими на те, которые вы можете установить с помощью Screaming Frog.

После того, как вы установили свои предпочтения, вы можете найти свою карту сайта по URL-адресу, указанному в верхней части страницы. В большинстве случаев это будет просто http://yourdomain.com/sitemap.xml.

2. Отправьте карту сайта в Google Search Console

Теперь, когда вы создали карту сайта, вам нужно отправить ее в Search Console.

Это позволяет Google узнать обо всех страницах, которые вы хотите проиндексировать, и может помочь их поисковым роботам найти самые важные из них.

На главной странице Search Console выберите предпочитаемую версию своего домена. Затем на левой боковой панели нажмите «Конфигурация сайта», затем «Карты сайта».

Нажмите кнопку «Добавить / протестировать карту сайта» в правом верхнем углу и введите URL-адрес своей карты сайта.

В большинстве случаев URL вашей карты сайта будет просто http://yoururl.com/sitemap.xml.

Если вы используете плагин WordPress, URL-адрес будет в настройках плагина. В Yoast файл обычно называется sitemap_index.xml.

Вы можете проверить местоположение своей карты сайта, введя ее в свой браузер. Если у вас правильный URL-адрес, он должен выглядеть примерно так:

После того, как вы нажмете «Отправить», вы увидите, что ваш файл Sitemap находится в состоянии ожидания.

После утверждения вы сможете увидеть количество отправленных вами страниц и количество проиндексированных.

Это может дать вам хорошее представление о , какой объем информации о вашем сайте хранит Google.

Однако важно понимать, что создание и отправка карты сайта — это не разовый процесс.

По мере того, как вы продолжаете добавлять страницы и обновлять свой сайт, ваш сайт будет развиваться — и ваша карта сайта должна развиваться вместе с ней.

Это поможет вам убедиться, что у Google всегда будет обновленная версия того, как должен выглядеть ваш сайт, и что он сможет сканировать и индексировать ваш сайт с максимальной эффективностью.

3. Создайте robots.txt

Хотя название «robots.txt» может показаться немного техническим и пугающим, сам файл на самом деле довольно прост.

Роботы.txt — это текстовый файл на вашем веб-сайте, который указывает поисковым системам, что индексировать, а что не индексировать.

По сути, это список команд для поискового робота, который сообщает ему, где он может и не может переходить на ваш сайт.

Это самая первая остановка, которую делает паук в своем путешествии, чтобы проиндексировать ваш сайт. Если в вашем файле robots.txt написано «не индексируйте меня», паук будет двигаться дальше.

Как вы уже догадались, очень важно, чтобы ваш robots.txt давал Google разрешение на сканирование сайта.Это значение по умолчанию.

Тем не менее, если на вашем веб-сайте есть разделы, которые вы не хотите отображать в результатах поиска, вы можете настроить это в файле robots.txt.

Как Google объясняет :

Мы предлагаем инструменты для веб-мастеров, которые позволяют владельцам сайтов детально выбирать, как Google сканирует их сайт: они могут предоставить подробные инструкции о том, как обрабатывать страницы на своих сайтах, могут запросить повторное сканирование или могут полностью отказаться от сканирования с помощью файла под названием «роботы». .текст».

Чем больше у вас страниц на вашем веб-сайте и чем больше вы открываете их до индекса, тем лучше будет ваша индексация.

Тем не менее, контроль над своей индексацией важен — и именно здесь ваш файл robots.txt становится важным.

Как создать файл robots.txt

Файлы Robots.txt — это простые текстовые файлы. Это упрощает создание их в стандартном текстовом редакторе вашего компьютера, таком как Блокнот (для пользователей Windows) и TextEdit (для пользователей Mac).

Это не , а не , включая такие программы, как Microsoft Word, которые могут добавлять дополнительное форматирование, искажающее ваш файл.

Прежде чем начать, проверьте свой FTP, чтобы увидеть, есть ли у вас уже файл robots.txt. Если вы это сделаете, он должен храниться в корневой папке как что-то вроде http://yourdomain.com/robots.txt.

Если да, загрузите его и используйте в качестве отправной точки.

Если нет, ничего страшного! Создать файл robots.txt , даже с нуля, довольно просто.

Во-первых, вам нужно ознакомиться с несколькими основными элементами синтаксиса robots.txt.

У Google есть полезный ресурс robots.txt для этого:

Чтобы создать файл, вам нужно знать несколько элементов:

  • User-agent : бот, к
  • применяется следующее правило
  • Запретить : URL-адрес, который вы хотите заблокировать
  • Разрешить : URL-путь в заблокированном родительском каталоге, который вы хотите разблокировать

Также важно отметить, что благодаря звездочке команда User-agent применяется ко всем поисковым роботам.Таким образом, если вы создаете правила с использованием «User agent: *», они будут применяться к сканерам из Google, Bing и всем остальным ботам, которые сканируют ваш сайт.

Если вы хотите, чтобы весь ваш сайт был открыт для сканирования, ваш файл robots.txt будет выглядеть так:

Правило применяется ко всем сканерам, и ничего не блокируется.

Если вы хотите создать более сложный файл robots.txt, вы можете использовать генератор, например SEObook .

Просто выберите ботов, к которым будет применяться каждое правило, затем введите файлы или каталоги, которые вы хотите запретить или разрешить.

Затем вы можете скопировать и вставить созданный контент внизу страницы в свой файл robots.txt.

SEObook также дает вам возможность добавить карту сайта. Раньше это считалось оптимальной практикой, но в нем нет необходимости, если вы отправили карту сайта в Google Search Console.

Тем не менее, это не повредит — так что не стесняйтесь включать его, если хотите.

Зачем блокировать определенные страницы?

Блокирование индексирования определенных разделов вашего сайта — одна из важнейших задач файла robots.txt файл.

Но зачем кому-то это нужно?

Короткий ответ заключается в том, что не каждая страница вашего сайта представляет ценность для читателей. Таким образом, даже если эти страницы были проиндексированы , они, скорее всего, никогда не ранжируются в результатах поиска.

Например, если ваш сайт работает на WordPress, он имеет множество подпапок, содержащих плагины и другую информацию.

Эти файлы важны для работы вашего сайта, но не помогают посетителям. Поэтому, если вы хотите предотвратить их сканирование и индексирование, ваш файл robots.txt может выглядеть примерно так: :

Вы также можете запретить свои страницы с благодарностью или подтверждением, страницы оформления заказа и любые другие страницы, на которые пользователю не имеет смысла переходить непосредственно из поисковой системы.

Это предохраняет поисковые системы от индексации информации, которая вряд ли когда-либо будет обработана в результате.

Robots.txt и ограничения сканирования

Запрет доступа к определенным страницам и подпапкам также может помочь ботам более эффективно сканировать ваш сайт.

Google ограничивает частоту сканирования сайтов, чтобы избежать перегрузки серверов. Вы также можете установить собственную частоту сканирования в Search Console.

Это означает, что он ограничен в том, сколько времени он может проводить на вашем сайте и сколько страниц он может сканировать за это время.

Запрет определенных страниц помогает сканерам сосредоточиться на содержании, которое вы действительно хотите проиндексировать, — и может улучшить частоту сканирования ваших ценных страниц в поисках новой информации.

4. Создайте внутренние ссылки

Один из наиболее эффективных способов поощрения сканирования и повышения индексации вашего веб-сайта — использование внутренних ссылок.

Пути, по которым пауки проходят через Интернет, образуются ссылками. Когда одна страница ссылается на другую страницу, паук следует по этому пути.

Убедитесь, что на вашем собственном веб-сайте есть ссылки на все ваши самые важные страницы.

Обычно это происходит естественным образом, если у вас есть хорошо организованный веб-сайт.Например, эта стандартная архитектура веб-сайта ресторана ссылается на внутренние страницы с основной навигацией.

Структура сайта часто упускается из виду, но может оказать серьезное влияние на множество различных частей вашей стратегии SEO.

Пользовательский опыт

С точки зрения пользователя, логическая архитектура сайта и навигация значительно упрощают просмотр вашего сайта.

Заранее спланируйте иерархию, а затем логически организуйте навигацию.Пользователю не нужно гадать, где находится информация, которую он ищет — она ​​должна быть интуитивно понятной на основе ваших категорий и ссылок.

Также рекомендуется сделать структуру сайта максимально простой. Сложные мегаменю могут выглядеть необычно и иногда необходимы для очень больших сайтов, но если они вам не нужны, не используйте их.

Вместо этого придерживайтесь простой и понятной настройки, которая сразу делает очевидным, где пользователю нужно щелкнуть, чтобы найти нужную информацию.

Гусеничные

Помимо пользователей-людей, логическая структура сайта облегчает поисковым роботам доступ к вашему контенту и его индексацию.

Хорошо спланированная архитектура сайта устанавливает иерархию между вашими страницами. Это помогает сканерам понять, какие страницы являются наиболее важными и как разные страницы связаны друг с другом.

Внутренние ссылки отправляют сканеров на другие страницы вашего сайта и помогают им находить новый контент

На каждой странице вашего сайта должны быть ссылки, указывающие на нее

Страницы концентратора

Если у вас много контента, вы можете создать «центральные страницы», чтобы помочь пользователям и поисковым системам более эффективно просматривать ваш сайт.

Эти страницы могут быть организованы по-разному, но по сути служат указателями вашей информации по определенным темам.

Вы можете создавать группы узловых страниц:

  • Сообщения в блоге на похожие темы
  • Похожие товары (если у вас есть сайт электронной торговли)
  • Новости по теме (если вы управляете редакционным сайтом)

Эти страницы помогают Google определять релевантность отдельных страниц и их связь с другими страницами вашего сайта.

Кроме того, с точки зрения пользователя, он позволяет легко находить дополнительный контент, связанный с интересующими нас страницами.

Например,

TechCrunch имеет страницы категорий для определенных тем, о которых он часто пишет, например, Internet of Things .

Если пользователь читает историю об Интернете вещей и хочет узнать больше, эта страница позволяет ему легко найти дополнительные статьи по этой теме.

И когда сканер увидит все эти страницы, сгруппированные вместе, он сможет определить, что у них похожий контент.

Эти типы узловых страниц могут быть чрезвычайно полезны. А если вы хотите добавить его на свой сайт, он может быть настолько простым или сложным, насколько вам нравится.

Если у вас есть опыт работы с HTML, вы можете жестко закодировать страницу (или страницы) с группами связанных ссылок. Делайте все, что хотите, с форматированием, или нет — решать вам.

Настоящая ценность заключается в создаваемых вами группировках и в той ценности, которую они предоставляют пользователям и поисковым роботам.

Независимо от того, какой формат вы выберете, обязательно продолжайте добавлять на свои центральные страницы с течением времени по мере добавления дополнительного контента.

Ссылки на новые страницы по мере их добавления помогут этим страницам быстрее индексироваться (и ранжироваться).

Ссылка на соответствующий контент на каждой странице

По мере того, как вы добавляете контент на свой сайт, темы, которые вы освещаете, обязательно должны совпадать.

Эти области пересечения предоставляют прекрасные возможности для добавления внутренних ссылок.

Например, если у вас есть сайт по личным финансам, вы можете написать сообщение с советами по улучшению кредитного рейтинга.

Если вы уже писали более общий пост о кредитном рейтинге, вы можете ссылаться на него как на ресурс для читателей.

Хотя некоторые из ваших посетителей могут быть лояльными читателями, многие из них не прочитали все содержимое вашего сайта.

Направление к релевантной информации может помочь им узнать больше о теме и побудить их проводить больше времени на вашем сайте.

Если ваш сайт относительно невелик, определение релевантных страниц для ссылки является несложным процессом.

И если вы напишете весь контент самостоятельно, ваш мозг может даже служить в качестве живого индекса каждой страницы на сайте.

Но если у вас большой сайт с сотнями (или тысячами!) Статей и сообщений, может быть почти невозможно определить наиболее релевантные из них, на которые можно ссылаться в каждом новом создаваемом вами фрагменте контента.

Вот где чрезвычайно полезными становятся такие инструменты, как подключаемый модуль еще одного связанного сообщения или YARPP . После установки плагина вы можете использовать его для автоматического добавления ссылок на релевантный контент в свои сообщения и страницы.

Вы можете установить предпочтения для ссылок, включенных в зависимости от категорий и временного диапазона.

Так, например, если вы настраиваете это для своего блога о личных финансах, вы можете выбрать размещение сообщений, которые вы написали о кредите за последний год, в нижней части ваших новых сообщений, связанных с кредитом, .

Вы также можете определить, хотите ли вы включать простые, только текстовые ссылки или ссылки с изображениями-эскизами.

Оглавление

Многие пользователи не читают все содержимое страницы. Они попадают на страницу в поисках определенной информации, затем прокручивают и просматривают ее, пока не найдут ее.

Если они не могут найти на вашей странице то, что им нужно, они, скорее всего, вернутся к результатам поиска и выберут другой результат.

Чем проще вы сделаете им навигацию по вашему контенту, тем больше вероятность, что они останутся. Один из способов сделать это — создать оглавление.

Если у вас есть сайт WordPress, вы можете использовать плагин, например Easy Table of Contents , для создания, как следует из названия, оглавления. (С легкостью).

Просто установите плагин, определите типы страниц, на которых вы хотите, чтобы ваше оглавление отображалось, и настройте, где вы хотите, чтобы оно отображалось на странице.

Вы также можете настроить плагин на автоматическое создание оглавления при использовании определенного количества заголовков и разрешить пользователям переключать его видимость.

Добавление их на ваши страницы позволяет пользователям легко переходить к ключевым разделам или информации, а также дает вам возможность ссылаться на дополнительные ресурсы.

Ваши сообщения не могут служить исчерпывающим ресурсом для ваших читателей. Но есть большая вероятность, что контент, который вы написали в прошлом, имеет отношение к вашему новому контенту.

Включите ссылки на эти сообщения под оглавлением, чтобы показать вашим читателям, где можно найти дополнительную информацию, и улучшите вашу внутреннюю структуру ссылок в процессе.

Внутренняя ссылка Yoast

Если у вас Yoast Premium, вы можете использовать внутренние функции ссылок Yoast, чтобы упростить процесс добавления соответствующих ссылок к каждому из ваших сообщений.

Эта функция работает, анализируя известные слова в каждом сообщении, а затем предоставляет предложения по ссылкам на основе статей с похожими известными словами и содержанием.

В отличие от YARPP, эта функция не полностью автоматизирована. Вместо того, чтобы автоматически добавлять ссылки в конец ваших сообщений, он дает вам сокращенный список возможных вариантов.

Таким образом, вы можете выбрать те варианты, которые вам больше всего нравятся, а затем включить их в свой пост, как вы сочтете нужным.

Это экономит время, избавляя от необходимости возвращаться ко всем вашим старым сообщениям каждый раз, когда вы публикуете что-то новое и хотите включить соответствующие внутренние ссылки.

Это требует немного больше усилий, чем автоматический плагин, но в результате вы можете сделать ваши ссылки более естественными для вашего контента.

5. Зарабатывайте входящие ссылки

Хотя внутренние ссылки помогают поисковым роботам понять структуру вашего сайта и найти новые страницы, наиболее важными являются входящие ссылки или ссылки с других сайтов.

Когда другие веб-сайты ссылаются на ваш, это дает вашему сайту поддержку во многих отношениях.

Если у вас есть опыт работы с SEO, вы уже знаете, насколько важны ссылки для установления доверия и авторитета.

Чем больше у вас ссылок с надежных сайтов, тем более авторитетным вы будете выглядеть в глазах Google и тем выше вероятность того, что они высоко оценят ваш сайт.

И хотя это само по себе является причиной сосредоточиться на получении входящих ссылок, они также могут помочь вам быстрее проиндексировать ваш сайт.

Ссылки с других сайтов отправляют сканеры на ваши страницы. Поэтому, если другой сайт ссылается на одну из ваших новых страниц, эта страница, скорее всего, будет просканирована и проиндексирована гораздо раньше.

И хотя некоторые из этих ссылок могут возникать естественным образом, лучше использовать более активный подход.

Если вы можете минимизировать время между появлением нового контента на сайте и возвращением ссылок, вы улучшите скорость индексации этого нового контента.

Конечно, если у вас есть опыт построения ссылок, вы знаете, что получить ссылки часто легче сказать, чем сделать.

Но если вы заранее создадите стратегию продвижения, вы будете точно знать, что делать, когда появится новая публикация, и у вас будет гораздо больше шансов быстро проиндексировать эту страницу.

Синдикация контента

Если вы можете найти места для синдицирования вашего контента, это один из самых простых способов обеспечить аудиторию для каждой новой части контента, которую вы публикуете.

Syndication — это процесс повторной публикации вашего контента на других веб-сайтах с указанием вашего сайта.

В отличие от гостевой публикации, которая требует от вас создания оригинального содержания для чужого сайта, вы получаете вознаграждение в виде ссылки с гораздо меньшими усилиями.

Например, Personal Branding Blog объединяет все свои новые сообщения на специальную страницу на сайте Business2Community.

Это означает, что весь их контент сразу публикуется в двух местах.

Кроме того, внизу каждого сообщения есть ссылка на личный блог брендинга.

Конечно, синдикация может быть сложной. Если все сделано неправильно, это может вызвать проблемы с дублированием контента.

В некоторых случаях владельцы сайтов даже находят синдицированные версии своего контента выше их собственного сайта.

Но когда все сделано хорошо, может помочь вам расширить охват и заработать больше ссылок из более крупных публикаций.

Повторная публикация на носителе

Medium — чрезвычайно популярный сайт для публикации и чтения контента.

Это также отличное место для синдикации.

Хотя многие пользователи публикуют материалы исключительно на платформе, вы также можете использовать ее для повторной публикации сообщений и статей на своем сайте. Medium также автоматически использует тег rel = canonical, поэтому вам не придется беспокоиться о проблемах с дублированием контента

Это тоже просто: просто введите URL-адрес, по которому ваша статья была ранее опубликована, в инструменте импорта Medium , затем нажмите «Импорт».

При этом будет извлечена вся копия исходного сообщения, а также форматирование текста, заголовки, списки и ссылки.Это позволяет очень легко импортировать и публиковать сообщения.

Изображения не импортируются автоматически , поэтому вам придется добавлять их вручную. Если в исходном посте не было изображений, подумайте о том, чтобы добавить их перед публикацией!

На главной странице и страницах категорий

Medium отображаются популярные сообщения с изображением перед заголовком. Это не значит, что не сможет получить результаты без изображения , но это, вероятно, будет намного сложнее.

Кроме того, если вы попадете на страницу категории, вы не хотите, чтобы ваш текстовый заголовок конкурировал за внимание со всеми этими изображениями.

Потратьте лишние десять минут, чтобы добавить несколько изображений в свой пост.

В конце концов, контент уже написан и импортирован, поэтому ваше время, потраченное на публикацию, скорее всего, в конечном итоге составит менее 15 минут

После импорта сообщения и добавления изображений у вас также есть возможность создать собственную постоянную ссылку.

Щелкните три точки справа от кнопки «Опубликовать», затем выберите «Пользовательский».

Затем вы можете добавить к своему сообщению до пяти соответствующих тегов.

Число рядом с каждым тегом показывает, сколько пользователей подписано на него. Таким образом, если вы выберете теги с большим количеством подписчиков, вы сможете значительно расширить охват и получить больше пользы от каждого публикуемого вами контента.

Добавить в справочники инфографики

Справочники были огромной частью SEO. Размещение вашего сайта в как можно большем количестве случайных каталогов было эффективным способом повысить рейтинг и привлечь трафик.

К счастью, это уже не так.Термин «каталог» часто ассоциируется со спамом, неэффективной практикой — и это правильно.

Справочники инфографики являются исключением.

Visual.ly, например, позволяет пользователям отправлять графику в свою галерею визуального вдохновения

Если вы создаете инфографику для своего сайта, вы можете отправить ее на сайт и использовать исходную ссылку в качестве источника. Это требует очень небольшой работы для потенциального воздействия, которое оно может вам принести.

Кроме того, учитывая, насколько трудоемким может быть создание инфографики, этот дополнительный шаг — отличный способ максимизировать отдачу от каждого из них.

Опубликовать в LinkedIn Pulse

Как и Medium, LinkedIn Pulse — это платформа, которая поощряет оригинальный контент, но также может использоваться для привлечения трафика на ваш сайт.

Если вы еще не публиковали на платформе, важно отметить, что статьи Pulse отделены от регулярных обновлений статуса.

Чуть ниже того места, где вы обычно вводите короткое обновление, нажмите «Написать статью».

Затем вы увидите полнотекстовый редактор с параметрами форматирования, мультимедийными возможностями и всем остальным, что вы ожидаете от платформы публикации.

Многие пользователи относятся к этой функции как к блогу и используют ее для публикации полностью оригинального контента.

Это, безусловно, неплохое использование платформы, особенно если учесть, что они получают письма непосредственно перед профессиональными контактами.

Но если вы хотите привлечь трафик к содержанию, которое вы уже опубликовали на своем сайте, вы можете использовать Pulse, чтобы поделиться отрывком, а затем добавить ссылку на полную версию.

Скопируйте и вставьте несколько первых разделов (или больше, в зависимости от длины сообщения).Обязательно включите информацию, которая достаточно интересна, чтобы читатели захотели дочитать статью до конца.

Затем включите ссылку на полную версию с призывом к действию, например «Нажмите, чтобы продолжить чтение» или «Подробнее!»

Эта стратегия позволяет вам использовать встроенную аудиторию и охват LinkedIn, в конечном итоге направляя трафик на ваш собственный сайт.

Пока ваши первые несколько абзацев четкие, это отличный способ быстро заработать читателей после публикации нового контента.

6. ​​Поощряйте обмен в социальных сетях

Степень роли социальных сетей в SEO неясна.

Что — это ясно, так это то, что социальные платформы — это простой способ немедленно сообщить людям, что ваш новый контент существует.

Скопируйте и вставьте ссылку, добавьте несколько слов текста и вуаля — ваш контент будет доступен всему миру (или, по крайней мере, вашим подписчикам).

При совместном использовании ваших страниц в социальных сетях на них также отправляются поисковые роботы, которые могут помочь ускорить процесс индексации.

Платформы социальных сетей должны обязательно иметь место в вашей издательской стратегии. А если еще не сделали, начать легко.

Создание учетных записей на основных платформах

Если вы только начинаете работать с социальными сетями, варианты могут показаться немного подавляющими. Но, по крайней мере, вы должны быть представлены в Facebook и Twitter.

Другие платформы, которые вы используете, зависят от вашей отрасли и целевой аудитории.

Если вы, например, представляете компанию B2B, вам обязательно захочется работать в LinkedIn.С другой стороны, если вы розничный торговец одеждой, ориентированный на людей 18–24 лет, вы, вероятно, добьетесь лучших результатов с помощью Instagram.

После того, как вы определились, на чем вы хотите сосредоточить свои усилия в социальных сетях, найдите время и создайте свой аккаунт или бизнес-страницу.

Например, на Facebook вы захотите включить всю свою контактную информацию, а также сведения о своих услугах, миссии и истории.

У вас также должны быть аватарка и фотография на обложке, которые точно отражают ваш бренд.

Создание стратегии продвижения

После того, как ваши учетные записи будут запущены, вам следует создать процедуру для публикации в социальных сетях , чтобы гарантировать, что вы регулярно публикуете новый контент в своих учетных записях.

Один из лучших способов сделать это — использовать такой инструмент, как Buffer.

Вы можете создать расписание для всех случаев, когда вы хотите публиковать новый контент для каждой из ваших учетных записей в социальных сетях.

Затем вы можете добавить контент в свою очередь и автоматически поделиться им в заранее определенное время публикации.

Таким образом, вам никогда не придется беспокоиться о том, чтобы не забывать публиковать определенные обновления или делиться конкретными ссылками в разное время дня или недели.

Кроме того, каждый раз, когда вы публикуете новую страницу, вы можете сразу же добавить ее в свою очередь.

Таким образом, независимо от того, в какое время он выйдет в эфир, он будет добавлен к вашему ранее существовавшему расписанию и предоставлен вашим подписчикам в ожидаемое время.

Когда вы установите такой уровень согласованности, ваши подписчики будут знать, чего ожидать, и начнут с нетерпением ждать возможности регулярно читать ваши новые статьи и сообщения в блогах.

С точки зрения индексации это также означает, что каждая новая страница, которую вы добавляете, будет доступна в течение нескольких дней после публикации.

Это отличный способ привлечь роботов на ваш сайт и повысить шансы на быструю индексацию.

Связаться с влиятельными лицами

Всем нравится чувствовать себя важными.

И хотя ваша главная цель с контентом должна состоять в том, чтобы приносить пользу вашим читателям, вы можете делать это таким образом, чтобы подчеркивать других людей и их мнения.

Один из лучших способов сделать это — использовать сводные сообщения или сообщения, в которых сочетаются цитаты, советы, прогнозы и другая информация от множества соответствующих людей.

Например, этот огромный список прогнозов маркетинга видеоконтента включает в себя информацию от 87 опытных маркетологов.

Это дает тонн ценности для читателей, которые хотят учиться у лучших, поскольку все это исходит от уважаемых маркетологов, многие из которых хорошо известны в отрасли.

Кроме того, он дает этим маркетологам возможность продемонстрировать свой опыт — так что вы можете быть уверены, что почти все они поделились им в своих социальных сетях, как только он будет запущен.

Это, вероятно, привело к тоннам дополнительного трафика для сайта. Такой трафик может оказаться огромным для индексации.

[tweet_box design = ”default”] Итак, если вы ищете идею для публикации в блоге, которая почти гарантированно привлечет у вас новых подписчиков в социальных сетях и отправит поисковые роботы на ваш сайт, обзорный пост — отличный вариант.[/ tweet_box]

Общайтесь с влиятельными лицами, спрашивайте их совета или идеи по определенной теме, а затем скомпилируйте их в ресурс от ваших читателей.

После публикации обязательно обратитесь к этим влиятельным лицам, чтобы сообщить им об этом. Во многих случаях они будут гордиться тем, что продемонстрируют свой опыт и поделятся публикацией со всеми своими подписчиками.

Рассмотрите возможность использования платных опций

Ссылки для обмена — это эффективный способ сообщить вашим подписчикам, что вы опубликовали новый контент.

Кроме того, вы также можете использовать свои учетные записи в социальных сетях для расширения аудитории с помощью платного продвижения постов.

На всех основных социальных платформах есть опции для «увеличения» контента, чтобы расширить охват.

Таким образом, вместо того, чтобы создавать традиционную рекламу, вы платите за то, чтобы контент, которым вы делитесь со своими подписчиками, был доступен большему количеству людей.

Большинство платформ также делают этот процесс довольно простым.

Например, на Facebook вы можете заранее определить, сколько вы готовы потратить на продвижение своего поста и как долго вы хотите, чтобы продвижение продвигалось.

Затем вы определяете свою аудиторию на основе множества вариантов таргетинга. Если вы хотите, чтобы все было просто, вы можете придерживаться стандартного таргетинга по возрасту, полу и местоположению.

Но если у вас есть более четкое представление о том, кого вы хотите охватить, вы также можете выбрать свою аудиторию на основе таких факторов, как интересы, должности и поведение в Интернете.

По сути, цель здесь — выбрать аудиторию, которая, вероятно, будет заинтересована в чтении статьи, сообщения в блоге или другого контента, которым вы делитесь.

Вы не обязательно пытаетесь продавать этим людям, но они должны быть частью вашей целевой аудитории.

(И если люди, которые могут быть заинтересованы в вашем контенте , не ваша целевая аудитория … возможно, пришло время скорректировать вашу стратегию.)

После того, как вы выбрали аудиторию, вы можете начинать продвигать свой пост. Если вы никогда раньше не продвигали публикацию, вы можете быть удивлены тем влиянием, которое она может оказать при относительно низкой цене.

Если вы решите сделать это регулярной частью своей стратегии, вы также можете использовать такие инструменты, как AdEspresso , чтобы автоматизировать процесс и сделать его еще проще.

Вы можете настроить свою учетную запись Facebook на автоматический запуск рекламных акций для сообщений, соответствующих определенным критериям.

Так, например, если вы делитесь статьей и она получает 50 лайков органически, вы можете с уверенностью считать, что это эффективный контент для вашего бизнеса.

Это тот контент, в который стоит инвестировать часть своего рекламного бюджета.

В AdEspresso вы можете установить эти параметры заранее — так что каждый раз, когда ссылка органически получает определенное количество лайков, вы автоматически тратите определенную сумму денег, продвигая ее еще большему количеству пользователей.

Это поможет вам получить максимальную отдачу от каждой части контента и направить свой рекламный бюджет на те части, которые принесут вам наибольшую отдачу от вложенных средств.

7. Создайте блог

Алгоритм Google отдает предпочтение предоставлению пользователям « свежих, недавних результатов поиска, ».

Владельцы сайтов постоянно публикуют новые страницы и обмениваются новой информацией, а поисковая система фокусируется на том, чтобы пользователи получали самую последнюю версию нужной информации.

Регулярное добавление нового содержания на ваш сайт показывает Google, что ваш сайт предоставляет свежую информацию. Лучший способ сделать это — вести блог.

Блог создает массу контента, которую пауки могут сканировать, а Google — индексировать. Чем больше высококачественного контента вы размещаете в Интернете, тем больше у вас индексации и тем больше возможностей для SEO вы зарабатываете.

Веб-сайты с блогами имеют в среднем на 434% больше проиндексированных страниц .

У этих компаний на 97% больше входящих ссылок и на 67% больше потенциальных клиентов.

Итак, если вы еще не ведете блог, его создание может помочь вашей маркетинговой стратегии несколькими способами.

А если вы не знаете, с чего начать, вы можете использовать уже имеющееся содержание блога, чтобы проанализировать, что работает.

Таким образом, вы не просто выбираете темы, которые, по вашему мнению, могут быть интересны вашей аудитории , — вы применяете метод сбора данных для создания интересных и эффективных сообщений в блогах.

Исследование конкурентов

Независимо от вашей отрасли или ниши, вероятно, уже сотни (если не тысячи) людей пишут об этом в блоги.

Вы можете использовать эти блоги для исследования конкурентов.

Существует множество инструментов, которые помогут вам определить, какой контент наиболее эффективен для других сайтов.

Один из лучших — Buzzsumo , показывает наиболее эффективный контент для любого домена или темы на основе репостов в социальных сетях.

Если вы знаете, какого конкурента вы хотите исследовать, введите его доменное имя в строку поиска. Затем вы увидите список их страниц, которыми пользуются чаще всего, с подсчетом количества публикаций для Facebook, LinkedIn, Twitter и Pinterest.

Вы также можете выполнить поиск по определенной теме, и вы увидите наиболее распространенный контент по этой теме с различных сайтов.

Если вы еще не знаете, кто ваши конкуренты в блоге, это отличный способ узнать, кто публикует контент в вашей отрасли.

Затем вы можете более подробно изучить каждый из блогов, которые получают много просмотров и репостов.

Если вы уже знаете, кто ваши конкуренты (или если вы просто хотите следить за тем, когда ваша компания упоминается в Интернете), вы можете настроить Google Alerts для отслеживания определенных слов и фраз.

Введите фразу, которую вы хотите отслеживать, а затем установите настройки предупреждений для времени, источников, языка и частоты.

Эти оповещения будут отправляться прямо на вашу электронную почту, чтобы вы могли легко быть в курсе, когда публикуется новый контент по теме, которую вы отслеживаете.

Если вы хотите углубиться в исследования конкурентов, вы можете использовать тонн из других полезных инструментов .

Для многих из них требуется подписка, но если вы серьезно настроены превзойти своих конкурентов и добиться лучших результатов с содержанием своего сайта, они того стоят.

8. Создайте RSS-канал

Создание RSS-канала не является абсолютно необходимым, но это не повредит.

RSS означает «действительно простое распространение», и это простой способ поделиться публикацией нового контента. По сути, это автоматизированный канал вашего веб-сайта, который обновляется каждый раз, когда вы публикуете новое сообщение.

Это также популярный способ подписки на блоги.

Каждое сообщение будет добавлено в RSS-канал сайта, и пользователи могут подписаться на этот канал и получать электронное письмо каждый раз, когда публикуется новое сообщение.

Сегодня большинство владельцев сайтов предпочитают иметь свои собственные списки адресов электронной почты, поэтому подписка на RSS больше не является популярным вариантом для этой цели.

Тем не менее, RSS-канал может быть эффективным способом сообщить Google о вашем новом содержании, как только оно будет опубликовано, и есть несколько других основных задач, которые вы можете использовать для автоматизации.

Считыватели RSS

Программа чтения RSS позволяет пользователям получать доступ ко всем RSS-каналам, на которые они подписаны, в одном месте. По сути, это настраиваемая новостная лента, где пользователи видят только истории и сообщения из таких публикаций, как.

Когда Google прекратил выпуск своего RSS-ридера Google Reader , многие подумали, что это означает конец работы RSS-ридеров в целом.

Тем не менее, многие люди все еще используют RSS-ридеры, такие как Feedly , в качестве инструмента для курирования контента.

Это идеально подходит для пользователей, которые хотят регулярно делиться полезным контентом в своих учетных записях в социальных сетях со своими подписчиками. Вместо того, чтобы разбираться в шуме на платформах социальных сетей, они могут использовать свои учетные записи Feedly для поиска высококачественных статей и сообщений из публикаций, которым они доверяют.

Итак, если читателям нравится ваш блог и они хотят знать о ваших новых сообщениях, но не обязательно хотят подписываться на рассылку новостей по электронной почте, полезно иметь RSS-канал.

Создать RSS-канал

Самый простой способ создать RSS-канал — использовать Feedburner.

Сначала введите URL-адрес своего блога в поле поиска. Имейте в виду, что в большинстве случаев ваш блог будет находиться в подпапке, например / blog.

Ввод этого URL-адреса (а не только вашего домена) гарантирует, что в ваш канал будут включены только сообщения вашего блога, а не другой контент, например служебные страницы или информация о ценах.

Затем дайте своему каналу заголовок и URL-адрес.

Затем нажмите «Далее» — и готово!

Теперь у вас есть адрес канала, на который пользователи могут подписаться в своих RSS-ридерах. Вы можете сообщить им об этом, добавив на свой сайт ссылку со стандартным значком RSS.

Если на вашем сайте уже есть значки социальных сетей, это логичное место для добавления RSS-канала.

Например, в заголовке журнала Search Engine Journal они ссылаются на свой RSS-канал прямо между кнопкой подписки по электронной почте и ссылками на свои учетные записи Twitter и Facebook.

Это позволяет посетителям, использующим RSS-ридеры, легко подписаться на их ленту.

RSS для автоматизации

После настройки RSS-канала вы также можете использовать его в сочетании с такими инструментами, как Zapier , для автоматизации публикации в социальных сетях.

Этот инструмент позволяет вам создавать «Zap-файлы» или ленты в вашем фиде, а затем автоматически публиковать их на различных платформах.

Сначала создайте учетную запись и введите URL-адрес канала.

Затем у вас есть возможность отфильтровать ленту по определенному контенту или темам.

В большинстве случаев вам нужно включать все свои сообщения.

Но если, например, вы хотите создать Zap, который включает только сообщения по определенной теме, используйте фильтр заголовка, чтобы включать в заголовок только сообщения с этим словом или фразой.

После настройки фильтров нажмите «Продолжить», чтобы завершить создание Zap.

Когда ваш Zap заработает, вы можете использовать Zapier для автоматизации множества задач. Наиболее распространенным является публикация новых RSS-элементов в ваших учетных записях в социальных сетях.

Вы можете настроить свою учетную запись таким образом, чтобы каждый раз, когда вы публикуете новую запись, она автоматически передавалась в выбранные вами социальные сети. Это простой способ сэкономить время и ускорить процесс привлечения трафика и поисковых роботов к вашему новому контенту.

9. Проверьте ошибки сканирования

По мере того, как вы работаете над своим сайтом и добавляете на него новое содержание, важно следить за тем, как он сканируется.

То, что ваш сайт сканируется эффективно сейчас , не означает, что у вас никогда не возникнет проблем.

Могут возникать ошибки сканирования, особенно при внесении значительных изменений в свой веб-сайт, таких как добавление, удаление или перемещение страниц.

К счастью, с Search Console легко отслеживать ошибки сканирования.

Доступ к отчету об ошибках сканирования

Вы можете выявить проблемы, регулярно просматривая свой отчет об ошибках сканирования.

Вот как:

  • Откройте Google Search Console и выберите свой веб-сайт
  • Нажмите на сканирование
  • Ошибки сканирования кликов

В этом отчете будут показаны все проблемы, которые возникали у Google при сканировании вашего сайта за последние 90 дней.

В разделе «Ошибки сайта» вверху показаны все основные проблемы, влияющие на работу всего сайта.

Если здесь есть какие-либо ошибки, нужно немедленно исправить их , поскольку они могут помешать правильной индексации всех ваших страниц.

Однако если у вас есть ошибки URL, они влияют только на определенные страницы вашего сайта. Часто это вызвано неработающими ссылками и ошибками перенаправления.

Если вы прокрутите страницу вниз, Search Console предоставит полный список этих URL-адресов и ошибок, так что вы можете изучить любые проблемы и исправить их.

Используйте Screaming Frog для обнаружения ошибок

Вы также можете использовать такие инструменты, как Screaming Frog , для сканирования вашего сайта на предмет проблем, которые могут повлиять на его сканирование.

Например, если вы настроили переадресацию на своем сайте, это иногда может вызывать ошибки сканирования. Вы можете использовать Screaming Frog, чтобы убедиться, что все ваши перенаправления работают правильно и не приводят к ошибкам 404.

Перед сканированием вашего сайта перейдите на вкладку «Дополнительно» в настройках конфигурации и убедитесь, что установлен флажок «Всегда следовать перенаправлениям».

Это указывает Screaming Frog следовать всем вашим перенаправлениям и предоставлять полный путь и код состояния. Затем выберите «Отчеты» в главном меню и нажмите «Цепочки перенаправления».

Это покажет вам все переадресации на вашем сайте и то, как они работают.

Можно использовать любые перенаправления со статусом 200 или 301. Но если вы увидите какие-то ошибки 404, вы захотите их исправить. Затем запустите отчет еще раз, чтобы убедиться, что все работает правильно.

Если вы перешли на HTTPS, вы также можете использовать Screaming Frog для обнаружения проблем с «небезопасным контентом» или страниц, которые имеют URL-адреса HTTPS, но элементы HTTP.

Чтобы получить доступ к этой информации, выберите опцию «Небезопасное содержимое» в меню «Отчеты».

Если вы обнаружите какие-либо проблемы, проконсультируйтесь с разработчиком, который перенес ваш сайт, чтобы он мог исправить эти проблемы и убедиться, что ваш сайт в безопасности.

Наконец, вы можете использовать Screaming Frog для обнаружения канонических ошибок на вашем сайте.

Канонический тег сообщает сканерам, какую версию вашего домена вы предпочитаете, будь то WWW или не-WWW, HTTP или HTTPS.

Подобно установке предпочтительного домена в Search Console, он помогает устранить проблемы с дублирующимся контентом и гарантирует, что Google индексирует правильную версию.

Однако неправильная реализация может вызвать серьезные ошибки сканирования.

Вы можете убедиться, что канонические теги вашего сайта работают правильно, выбрав «Канонические ошибки» в меню «Отчеты».

Если вы видите сообщение 404, это проблема, которую нужно немедленно исправить. Отправьте отчет своему разработчику, чтобы он определил причину проблемы и вернул статус сканирования без ошибок.

Заключение

Проиндексирование в Google — важный первый шаг к созданию успешного веб-сайта.Без него ваш сайт не может отображаться в результатах поиска — это означает, что, если ваши страницы не проиндексированы, они вряд ли получат какой-либо трафик.

К счастью, вам не нужно оставлять индексацию на волю случая. Такие инструменты, как Search Console и Yoast, позволяют контролировать сканирование и индексирование вашего сайта, а также позволяют легко отслеживать статус сканирования.

При обновлении сайта следите за тем, как он сканируется и индексируется. Регулярная проверка — это простой шаг, который позволяет выявлять проблемы и устранять их до того, как они вызовут проблемы с видимостью вашего поиска.

Plus, следование передовым практикам, таким как отправка карты сайта, создание ссылок и публикация нового контента на регулярной основе, может помочь в быстром и эффективном сканировании вашего сайта.

Какие ваши любимые методы вы используете, чтобы убедиться, что ваш сайт правильно индексируется? Вы знаете, как проверить статус своего индекса Google?

Как заставить Google индексировать ваш сайт (быстрее)

Чтобы ваши целевые страницы, блоги, домашние страницы и другой онлайн-контент отображались в результатах поиска Google, вам необходимо убедиться, что ваш веб-сайт индексируется.Индекс Google — это в основном база данных.

Когда люди используют поисковую систему для поиска контента, Google обращается к своему индексу, чтобы предоставить релевантный контент. Если ваша страница не проиндексирована, значит, ее нет в поисковой системе Google. Это плохие новости, если вы надеетесь привлечь на свой сайт обычный трафик с помощью обычного поиска.

В этом руководстве подробно рассказывается об индексировании и его важности. В нем также объясняется, как вы можете проверить, проиндексирована ли ваша страница, как исправить общие технические проблемы SEO, вызывающие проблемы с индексированием, и как быстро заставить Google повторно проиндексировать ваш сайт, если он еще не проиндексирован.

Индекс Google — это просто список всех веб-страниц, о которых знает поисковая система. Если Google не проиндексирует ваш сайт, он не появится в результатах поиска Google.

Это как если бы вы написали книгу, но ее нет в книжных магазинах или библиотеках. Книгу никто никогда не найдет. Они могли даже не знать о его существовании. И если бы читатель искал эту книгу, ему было бы очень трудно ее найти.

Сайты, которые не проиндексированы, не находятся в базе данных Google.Таким образом, поисковая система не может отображать эти веб-сайты на страницах результатов поиска (SERP).

Чтобы индексировать веб-сайты, поисковые роботы Google (Googlebot) должны «сканировать» этот веб-сайт. Узнайте больше о разнице между возможностью сканирования и индексирования.

В качестве напоминания, вот краткий обзор процесса поисковой системы:

  • Сканирование : боты поисковых систем сканируют веб-сайт, чтобы выяснить, стоит ли его индексировать. Веб-пауки, или «робот Googlebot», всегда сканируют сеть, переходя по ссылкам на существующих веб-страницах в поисках нового содержания.

  • Индексирование : поисковая система добавляет веб-сайт в свою базу данных (в случае Google, в свой «Индекс»).

  • Рейтинг : поисковая система оценивает веб-сайт по таким показателям, как релевантность и удобство использования.

Индексирование означает, что сайт хранится в базах данных Google. Это не значит, что он будет отображаться в верхней части поисковой выдачи. Индексирование контролируется заранее определенными алгоритмами, которые учитывают такие элементы, как спрос веб-пользователей и проверки качества.Вы можете влиять на индексацию, управляя тем, как «пауки» обнаруживают ваш онлайн-контент.

Пройдите технический SEO-аудит

с помощью Semrush Site Audit

Нет никаких сомнений в том, что вы хотите, чтобы ваш сайт был проиндексирован, но как узнать, есть это или нет? К счастью, гигант поисковых систем позволяет довольно легко узнать, где вы находитесь, с помощью поиска по сайту. Вот как это проверить:

  1. Зайдите в поисковую систему Google.

  2. В строке поиска Google введите «site: example.com. »

  3. Когда вы заглянете под панель поиска, вы увидите категории результатов Google «Все», «Изображения», «Новости» и т. Д. Прямо под этим вы увидите приблизительное количество ваших страниц, проиндексированных Google. .

  4. Если отображается ноль результатов, страница не проиндексирована.

Кроме того, вы можете использовать Google Search Console, чтобы проверить, проиндексирована ли ваша страница. Создать учетную запись можно бесплатно. Вот как получить нужную информацию:

  1. Войдите в Google Search Console.

  2. Щелкните «Указатель».

  3. Щелкните «Покрытие».

  4. Вы увидите количество проиндексированных действительных страниц.

  5. Если количество действительных страниц равно нулю, Google не проиндексировал вашу страницу.

Вы также можете использовать Search Console, чтобы проверить, проиндексированы ли определенные страницы. Просто вставьте URL-адрес в инструмент проверки URL-адресов. Если страница проиндексирована, вы получите сообщение «URL находится в Google.”

Чтобы проиндексировать сайт, Google может потребоваться от нескольких дней до нескольких недель. Это может расстраивать, если вы только что открыли страницу и обнаружили, что она не проиндексирована. Как можно открыть для себя вашу новую красивую веб-страницу через Google? К счастью, есть шаги, которые можно предпринять для более эффективного индексирования. Ниже мы объясним, что вы можете сделать, чтобы ускорить процесс.

Самый простой способ проиндексировать ваш сайт — это запросить индексацию через Google Search Console.Для этого перейдите в инструмент проверки URL в Google Search Console. Вставьте URL-адрес, который вы хотите проиндексировать, в строку поиска и дождитесь, пока Google проверит URL-адрес. Если URL не проиндексирован, нажмите кнопку «Запросить индексирование».

Примечание. Google временно отключил инструмент индексирования запросов в октябре 2020 года. Однако он был только что восстановлен в Search Console!

Однако индексация Google требует времени. Как уже упоминалось, если ваш сайт новый, он не будет проиндексирован в одночасье. Кроме того, если ваш сайт не настроен должным образом для сканирования роботом Googlebot, есть вероятность, что он вообще не будет проиндексирован.

Независимо от того, являетесь ли вы владельцем сайта или онлайн-маркетологом, вы хотите, чтобы ваш сайт был эффективно проиндексирован. Вот как это сделать.

Robots.txt — это файлы, которые робот Googlebot распознает как индикатор того, что он НЕ должен сканировать веб-страницу. Пауки поисковых систем от Bing и Yahoo также распознают Robots.txt. Вы могли бы использовать файлы Robots.txt, чтобы помочь сканерам определить приоритетность более важных страниц, чтобы они не перегружали ваш сайт запросами.

Хотя все это может показаться немного техническим, все сводится к обеспечению возможности сканирования вашей страницы, и вы можете получить дополнительную помощь в обнаружении этого с помощью нашего встроенного средства проверки SEO.Он обеспечивает обратную связь по оптимизации, включая технические изменения, например, блокировку сканирования страницы.

SEO-теги — еще один способ направлять пауков поисковых систем, таких как Googlebot. Есть два основных типа SEO-тегов, которые следует оптимизировать.

  • Неверные теги noindex : Эти теги запрещают поисковым системам индексировать страницы. Если определенные страницы не индексируются, возможно, у них есть теги noindex. Проверьте эти два типа:

    • Мета-теги : Вы можете проверить, какие страницы вашего веб-сайта могут иметь метатеги noindex, просмотрев предупреждения «noindex page».Если страница помечена как noindex, удалите метатег, чтобы она проиндексировалась.

    • X-Robots-Tag : вы можете использовать Google Search Console, чтобы узнать, на каких страницах есть X-Robots-Tag в заголовке HTML. Используйте инструмент проверки URL-адресов, описанный выше. После входа на страницу найдите ответ на «Индексирование разрешено?» Если вы видите слова «Нет:« noindex »обнаружен в http-заголовке« X ‑ Robots-Tag »», значит, вам нужно удалить X-Robots-Tag.

  • Канонические теги : Канонические теги сообщают сканерам, предпочтительна ли определенная версия страницы.Если на странице нет канонического тега, робот Googlebot распознает, что это предпочтительная страница и единственная версия этой страницы, и проиндексирует эту страницу. Если на странице есть канонический тег, робот Googlebot предполагает, что существует альтернативная предпочтительная версия этой страницы, и не будет индексировать эту страницу, даже если другой версии не существует. Используйте инструмент проверки URL-адресов Google, чтобы проверить наличие канонических тегов. В этом случае вы увидите предупреждение «Альтернативная страница с каноническим тегом».

Внутренние ссылки помогают сканерам находить ваши веб-страницы.Страницы без ссылок известны как «страницы-сироты» и редко индексируются. Правильная архитектура сайта, изложенная в карте сайта, обеспечивает правильные внутренние ссылки.

XML-карта сайта содержит все содержимое вашего веб-сайта, что позволяет идентифицировать страницы, на которые нет ссылок. Вот еще несколько советов по использованию внутренних ссылок:

  • Исключить внутренние ссылки nofollow . Когда робот Googlebot сталкивается с тегами nofollow, он сообщает Google, что ему следует удалить указанную с тегами целевую ссылку из своего индекса.Удалите теги nofollow из ссылок.

  • Добавить высокопоставленные внутренние ссылки . Как уже упоминалось, пауки обнаруживают новый контент, сканируя ваш сайт. Внутренние ссылки ускоряют процесс. Оптимизируйте индексацию, используя страницы с высоким рейтингом для внутренних ссылок на новые страницы.

  • Создавать качественные обратные ссылки . Google признает, что страницы важны и заслуживают доверия, если на них постоянно ссылаются авторитетные сайты. Обратные ссылки сообщают Google, что страницу следует проиндексировать.

Высокое качество контента имеет решающее значение как для индексации, так и для ранжирования. Чтобы обеспечить высокую эффективность содержания вашего веб-сайта, удалите некачественные и неэффективные страницы.

Это позволяет роботу Googlebot сосредоточиться на наиболее ценных страницах вашего веб-сайта, более эффективно используя ваш «краулинговый бюджет». Кроме того, вы хотите, чтобы каждая страница вашего сайта имела ценность для пользователей. Далее контент должен быть уникальным. Дублированный контент может быть красным флагом для Google Analytics.

Независимо от того, являетесь ли вы веб-мастером, управляющим корпоративным сайтом, программистом на JavaScript по найму или независимым блоггером, базовый навык SEO является обязательным навыком.SEO может показаться устрашающим, но вам не нужно быть экспертом, чтобы понять это.

Пройдите технический SEO-аудит

с помощью Semrush Site Audit

Как заставить Google индексировать ваш сайт

Коротко о том, как попасть в индекс Google

Процесс индексирования Google сложен, многие этапы влияют друг на друга.

Чтобы заставить их быстро проиндексировать ваш веб-сайт, вам нужно убедиться, что нет никаких препятствий, мешающих индексации Google.

Во-вторых, сделайте все возможное, чтобы уведомить Google о том, что у вас есть свежий контент и вы хотите, чтобы ваш веб-сайт был проиндексирован. Имейте в виду, что качество вашего контента и отсутствие внутренних ссылок могут помешать процессу индексации.

Наконец, повысьте популярность своего веб-сайта, создав внешние ссылки на ваш веб-сайт и побудив людей говорить о вашем контенте в социальных сетях.

Если вашего контента нет в Google, существует ли он вообще?

Чтобы ваш веб-сайт был виден в доминирующей поисковой системе, его сначала необходимо проиндексировать.В этой статье мы покажем вам, как заставить Google быстро и эффективно проиндексировать ваш сайт и какие препятствия следует избегать.

Краткое описание процесса индексирования Google

Прежде чем углубляться в то, как индексировать ваш сайт, давайте рассмотрим упрощенное объяснение того, как работает процесс индексации Google.

Индекс

Google можно сравнить с огромной библиотекой — она ​​больше, чем все библиотеки мира вместе взятые!

Индекс содержит миллиарды и миллиарды страниц, из которых Google выбирает наиболее релевантные, когда пользователи делают поисковые запросы.

При таком большом количестве контента, который постоянно меняется, Google должен постоянно искать новый контент, контент, который был удален, и контент, который обновлялся — и все это для поддержания актуальности индекса.

Чтобы Google оценил ваш сайт, он сначала должен пройти следующие три этапа:

  1. Discovery : обрабатывая карты сайта XML и переходя по ссылкам на других страницах, о которых Google уже знает, поисковая машина обнаруживает новых и обновленных страниц и ставит их в очередь для сканирования.

  2. Сканирование : Затем Google переходит к сканированию каждой обнаруженной страницы и передает всю найденную информацию процессам индексации.

  3. Индексирование : Среди прочего, процессы индексирования обрабатывают анализ контента, отображают страницы и определяют, нужно ли их индексировать.

Взаимосвязанность системы индексирования Google

Процесс индексирования Google очень сложен, с множеством взаимозависимостей между этапами, включенными в этот процесс.Если какая-то часть потока выходит из строя, это влияет и на другие фазы.

Например, 10 августа 2020 года SEO-сообщество заметило шквал изменений в рейтинге результатов поиска. Многие утверждали, что это означает, что Google выпускает значительное обновление. Но на следующий день Google объявил, что на самом деле это было вызвано ошибкой в ​​их системе индексирования, которая повлияла на ранжирование:

Чтобы пролить свет на сложность и взаимосвязь процесса индексирования, Гарри Илес объяснил рабочий процесс с кофеином в ветке Twitter:

Этот твит предполагает, что ошибка на этапе индексации может сильно повлиять на последующий процесс — в данном случае испортить систему ранжирования.

Наряду с этим событием важно отметить, что в мае 2020 года в Google было проведено обширное обновление ядра, которое повлияло на процесс индексации. С тех пор Google стал медленнее индексировать новый контент и стал более разборчивым в отношении контента, который решает проиндексировать. Кажется, что его процесс качественной фильтрации стал намного строже, чем раньше.

Полезные ресурсы

Не пропустите органический трафик

Узнайте, станут ли ваши самые важные страницы неиндексируемыми, и получайте уведомления в режиме реального времени с ContentKing.

Как проверить, проиндексировал ли Google ваш сайт?

Есть несколько быстрых способов проверить, проиндексировал ли Google ваш веб-сайт или все еще застряли на предыдущих этапах обнаружение и сканирование .

Отзыв из Google Search Console

Воспользуйтесь отчетом об индексировании в Google Search Console, чтобы получить быстрый обзор статуса индексирования вашего веб-сайта. В этом отчете содержится обратная связь с более подробной технической информацией о процессе сканирования и индексирования вашего сайта.

Отчет возвращает четыре типа статусов:

  1. Действителен : эти страницы были успешно проиндексированы.
  2. Действительно с предупреждениями : эти страницы проиндексированы, но есть некоторые проблемы, которые вы, возможно, захотите исправить.
  3. Исключено : эти страницы не были проиндексированы, поскольку Google обнаружил четкие сигналы о том, что их не следует индексировать.
  4. Ошибка : Google по какой-то причине не может проиндексировать эти страницы.

Проверка отчета об индексном покрытии вашего веб-сайта

  1. Войдите в Google Search Console.
  2. Выберите недвижимость.
  3. Щелкните Покрытие под индексом на левой панели навигации.

Вот пример того, как выглядит отчет об индексировании для большого веб-сайта:

Отчет об индексировании позволяет быстро проверить общий статус индексирования вашего сайта, а также вы можете использовать инструмент проверки URL в Google Search Console для увеличения отдельных страниц.

Проверьте свой URL в Google Search Console

  1. Войдите в Google Search Console.
  2. Выберите недвижимость.
  3. Отправьте URL-адрес веб-сайта, который хотите проверить.

Далее вы увидите что-то вроде этого:

Если инструмент проверки URL показывает, что URL еще не проиндексирован, вы можете использовать тот же инструмент для запроса индексации.

FAQ

Проверьте кеш URL

Проверьте, есть ли у вашего URL-адреса кешированная версия в Google, набрав cache: https: //example.com в Google или в адресной строке, или щелкнув маленькую стрелку, указывающую вниз под URL-адресом в поисковой выдаче.

Если вы видите результат, Google проиндексировал ваш URL. Вот пример для одной из наших статей:

Дата, указанная на снимке экрана, относится к последней индексации веб-сайта. Имейте в виду, что в нем ничего не говорится о том, когда сканировали в последний раз. Как отметил в своем твите Гарри Иллис, веб-сайт мог быть просканирован снова без индексации обновлений Google.

В то же время проверка кэша URL-адресов также не является надежным — вы можете увидеть кешированную страницу, даже если — тем временем — страница была удалена из индекса Google.

Если он ранжируется, он проиндексирован как

.

Еще один способ проверить, проиндексированы ли ваши страницы, — это проверить, ранжируются ли они, с помощью средства отслеживания рейтинга или просто проверив данные об эффективности Google Search Console, чтобы узнать, получаете ли вы клики и показы:

Используйте данные о производительности для определения статуса индекса

  1. Войдите в Google Search Console.
  2. Выберите недвижимость.
  3. Нажмите Результаты поиска ниже Производительность слева.
  4. Здесь отфильтруйте страницу, которую вы ищете, щелкнув фильтр вверху. По умолчанию он открывается с настройкой URL-адресов, содержащих . Введите URL-адреса, которые вы ищете.

Далее вы увидите что-то вроде этого:

Поиск точного заголовка страницы или URL

В качестве альтернативы, чтобы узнать, проиндексирована ли страница, вы можете выполнить поиск по точному заголовку страницы, заключив его в кавычки ( «Заголовок вашей страницы» ), используйте оператор поиска intitle: с заголовком вашей страницы ( intitle : "Название вашей страницы" ) или просто введите URL-адрес в Google.

сайт: запросы

Вы также можете проверить, проиндексирована ли ваша страница, с помощью запроса site: для страницы. Вот пример: ввод site: https: //www.contentkingapp.com/academy/control-crawl-indexing/ может показать, проиндексирована ли эта страница.

Однако такой подход не всегда надежен!

Мы видели случаи, когда страницы ранжируются, но не отображаются для сайта : запросов. Так что никогда не полагайтесь только на эту проверку.

Как заставить Google быстро проиндексировать ваш сайт

Вот как заставить Google быстро проиндексировать ваш сайт:

  1. Предотвратить влияние директив роботов на индексацию
  2. Правильно настроить канонические теги
  3. Не запрещайте контент, который вы хотите проиндексировать
  4. Предотвращение ловушек и оптимизация бюджета сканирования
  5. Подача индексируемого содержания Google через карту сайта XML
  6. Отправьте URL-адреса в Google Search Console вручную
  7. Отправить сообщение через Google Мой бизнес
  8. Автоматическое индексирование через Google Indexing API
  9. Предоставляйте Google только высококачественный контент
  10. Предотвращение дублирования содержимого
  11. Используйте внутренние ссылки и избегайте использования nofollow
  12. Создайте релевантные обратные ссылки на ваш контент
  13. Создавайте ажиотаж вокруг своего контента в социальных сетях

1.Предотвратить влияние директив роботов на индексацию

Распространенной причиной того, что Google не индексирует ваш контент, является директива noindex для роботов. Хотя эта директива помогает предотвратить проблемы с дублированием контента, она дает Google мощный сигнал не индексировать определенные страницы вашего веб-сайта. Директивы мета-роботов могут быть реализованы через источник HTML и заголовок HTTP.

В исходном HTML-коде метатег роботов может выглядеть примерно так:

.

Реализуйте их только на страницах, которые вы определенно не хотите индексировать, и в случае, если страница, которую вы хотите проиндексировать, имеет проблемы с индексированием, дважды проверьте, не реализована ли директива noindex.

Обнаружение неиндексированного контента в режиме реального времени

Получайте мгновенные уведомления о любых важных страницах, которые не индексируются. Больше никаких SEO-сюрпризов!

2. Правильно настройте канонические теги

Хотя канонические теги не являются таким сильным сигналом, как директива мета-роботов, их неправильное использование может привести к проблемам с индексированием.Убедитесь, что страницы, которые вы хотите проиндексировать, не канонизированы.

Одна вещь, которую я видел, — это сайты, которые настолько увлечены обеспечением канонизации своих страниц, что в конечном итоге канонизируются на страницы, которые также помечены как noindex .

Google нужны четкие и последовательные сигналы, поэтому канонизация вашего контента на странице с пометкой noindex может остановить работу затронутых страниц.

3. Не запрещайте контент, который вы хотите проиндексировать

Роботы.txt — важный инструмент, который отправляет сигналы всем поисковым системам о возможности сканирования ваших URL-адресов. Его можно настроить так, чтобы Google знал, что он должен игнорировать определенные части вашего веб-сайта.

Убедитесь, что URL-адреса, которые вы хотите проиндексировать, не запрещены в robots.txt. Ошибки в файле robots.txt могут привести к тому, что новый контент и обновления контента не будут индексироваться. Имейте в виду, что любой может ошибиться в файле robots.txt — даже крупные компании, такие как Ryanair.

Чтобы проверить, какие страницы блокируются роботами.txt, проверьте отчет «Проиндексировано, но заблокировано файлом robots.txt» в Google Search Console.

Наконечник Pro

Запрещение URL-адреса в robots.txt не обязательно означает, что сайт исчезнет из поиска Google. Веб-сайт может отображаться в поисковой выдаче, но с плохим фрагментом.

Файл robots.txt может быть простым в использовании, но он также довольно мощный с точки зрения создания большого беспорядка. Я видел много случаев, когда веб-сайты были «готовы к работе» и были запущены с помощью Disallow: / .

В результате все страницы блокируются для поисковых систем, и никто не может найти сайт через поиск Google. Тем временем клиент начинает задаваться вопросом, почему Google ничего не индексирует. Одна строка кода может пройти незамеченной и заблокировать поиск всего содержимого вашего веб-сайта Google!

4. Предотвратите ловушки сканера и оптимизируйте бюджет сканирования

Чтобы получить максимальную отдачу от сканирования вашего веб-сайта Google, избегайте создания ловушек для сканеров. Ловушки поисковых роботов — это структурные проблемы на веб-сайте, в результате которых сканеры находят практически бесконечное количество нерелевантных URL-адресов, в которых сканеры могут потеряться.

Вы должны убедиться, что техническая база вашего веб-сайта соответствует требованиям, и что вы используете надлежащие инструменты, которые могут быстро обнаруживать ловушки сканера, на которые Google может тратить ваш ценный краулинговый бюджет.

Самая большая причина ловушек для поисковых роботов на веб-сайтах сегодня связана с фасетной навигацией и фильтрами по цене или размеру (особенно если вы можете выбрать несколько). Если вы не скрываете эти URL-адреса от Google, вы можете легко создать миллионы дополнительных URL-адресов всего с нескольких страниц.Помните, что Google может переходить как по обычным ссылкам, так и по ссылкам JavaScript, и что URL-адреса чувствительны к регистру.

Мой совет: убедитесь, что все варианты URL, которые необходимо заблокировать, действительно заблокированы!

5. Загрузите индексируемое содержание Google через карту сайта XML

Убедившись, что с вашей стороны нет блокировки, вы должны упростить для Google обнаружение ваших URL-адресов и понимание инфраструктуры вашего веб-сайта в целом. Карты сайта XML — отличный способ сделать это.

Весь недавно опубликованный или обновленный контент, который необходимо проиндексировать, должен автоматически добавляться в ваши XML-карты сайта. Чтобы Google упростил поиск вашего контента, отправьте свои XML-карты сайта в Google Search Console.

  1. Войдите в Google Search Console.
  2. Выберите свойство, для которого вы хотите отправить карту сайта.
  3. Нажмите Карты сайта под Индекс слева.
  4. Отправьте URL-адрес XML-файла Sitemap.

Затем Google будет регулярно проверять предоставленную вами карту сайта в формате XML на предмет нового содержания, чтобы обнаруживать, сканировать и, надеюсь, индексировать.

Наконечник Pro

Если у вас большой веб-сайт, имейте в виду, что файлы Sitemap XML должны быть ограничены до 50 000 URL. Лучше создать больше XML-файлов Sitemap с меньшим количеством URL в каждой, чем превышать этот предел.

Оливер Мейсон описал стратегию карты сайта XML (открывается в новой вкладке), в которой он ограничил количество URL-адресов до 10 000 и упорядочил их в хронологическом порядке — с помощью карты сайта 1.xml , содержащий самые старые страницы, и sitemap14.xml , содержащий самые последние страницы.

Это привело к улучшению индексации. Кажется, стоит кормить Google меньшим количеством URL-адресов и группировать новый контент вместе.

Мой лучший способ быстро проиндексировать что-либо — это всегда проверять сайт в Search Console и затем отправлять туда XML-карту сайта.

Всегда следите за тем, чтобы в вашей XML-карте сайта были все страницы, которые вы хотите проиндексировать, и убедитесь, что они организованы таким образом, чтобы Google мог их читать — с помощью индексов карты сайта, если это необходимо.

Для меня это был лучший способ постучать в дверь Google, чтобы сообщить им, что они могут путешествовать по веб-сайту как можно скорее и сканировать / индексировать все, что там находится, и вы всегда можете проверить, когда оно было отправлено и в последний раз прочитано Google.

6. Вручную отправьте свои URL-адреса в Google Search Console

.

Хотя Google будет обнаруживать, сканировать и потенциально индексировать ваши новые или обновленные страницы самостоятельно, он все равно платит за то, чтобы подтолкнуть его, отправив URL-адреса в Google Search Console.Таким образом, вы также можете ускорить процесс ранжирования.

Вы можете отправить свои URL-адреса в инспекторе URL-адресов GSC:

  1. Войти в Google Search Console
  2. Выберите веб-сайт, для которого вы хотите отправить URL
  3. Отправить URL в верхнюю часть консоли поиска Google
  4. Убедитесь, что URL-адрес индексируется, нажав кнопку TEST LIVE URL .
  5. Нажмите кнопку ЗАПРОС ИНДЕКСА .
  6. Сделайте то же самое для страниц, которые ссылаются на страницу, которую вы хотите проиндексировать.

Наконечник Pro

Обратите внимание, что страницы могут индексироваться, но не ранжироваться. Например, если вы запрашиваете индексацию в Google Search Console (GSC), ваши страницы будут быстро проиндексированы, но не сразу ранжируются. Однако, как правило, это ускоряет весь процесс.

7. Отправьте сообщение через Google Мой бизнес

.

Отправка сообщения через Google Мой бизнес дает Google дополнительный толчок для сканирования и индексации URL-адресов, которые вы туда включили. Мы не рекомендуем делать это только для любого сообщения, и имейте в виду, что это сообщение будет отображаться на панели знаний Google Мой бизнес с правой стороны при поиске по брендам.

  1. Войти в Google Мой бизнес (открывается в новой вкладке)
  2. Выберите место, для которого вы хотите отправить сообщение.
  3. Щелкните Create post и выберите тип What's New .
  4. Добавьте фото, напишите краткое сообщение, выберите Узнать больше вариант для Добавьте кнопку (необязательно) , введите свой URL в поле Ссылка для вашей кнопки и нажмите Опубликовать .
  5. Сделайте то же самое для страниц, которые ссылаются на страницу, которую вы хотите проиндексировать.

8. Автоматическое индексирование через Google Indexing API

.

Веб-сайты, на которых есть много недолговечных страниц, таких как объявления о вакансиях, объявления о мероприятиях или прямые трансляции, могут использовать Google Indexing API (открывается в новой вкладке), чтобы автоматически запрашивать у них сканирование и индексирование нового содержания и изменений содержания. Поскольку он позволяет отправлять отдельные URL-адреса, это эффективный способ для Google поддерживать их индекс в актуальном состоянии.

С помощью Indexing API вы можете

  • Обновить URL: уведомить Google о новом или обновленном URL для сканирования
  • Удалить URL: уведомить Google о том, что вы удалили устаревшую страницу со своего веб-сайта.
  • Получить статус запроса: узнать, когда Google сканировал URL в последний раз

Хотя Google не рекомендует кормить их другими типами контента, кроме заданий и событий, мне удалось проиндексировать обычные страницы с помощью API.Я заметил одну вещь: похоже, что API работает лучше для новых страниц, чем для повторной индексации. В какой-то момент Google может применить это, но пока все работает нормально. В RankMath есть плагин (открывается в новой вкладке), который может значительно облегчить работу, но требует небольшой настройки.

9. Предоставляйте Google только высококачественный контент

Цель Google — как можно быстрее вернуть своим пользователям высококачественный контент. Поэтому всегда сосредотачивайтесь на предоставлении Google лучшего контента, который вы можете создать, чтобы повысить свои шансы на быстрое индексирование.

В условиях строгой оценки содержания Google и непрекращающейся конкуренции создание и оптимизация качественного содержания — это процесс, который никогда не прекратится.

Помимо создания нового контента, сосредоточьтесь на улучшении того, что уже есть. Обновите неэффективный контент, чтобы он давал более точные ответы потенциальным посетителям. Если на вашем веб-сайте есть некачественный или устаревший контент, подумайте о том, чтобы либо полностью удалить его, либо отговорить Google тратить на него свой драгоценный бюджет сканирования.

Наконечник Pro

Процесс удаления устаревшего, нерелевантного или просто слишком некачественного контента называется сокращением контента. Избавившись от мертвого груза, вы создаете пространство для другого контента — у которого есть потенциал — для процветания, предоставляя Google только лучшее содержание, которое может предложить ваш веб-сайт.

10. Предотвращение дублирования контента

Еще один способ превратить краулинговый бюджет Google в огромную трату — дублирование контента. Этот термин относится к очень похожему или идентичному контенту, который отображается на нескольких страницах вашего собственного веб-сайта или на других веб-сайтах.

В целом, дублированный контент может сбивать Google с толку. В принципе, Google индексирует только один URL для каждого уникального набора контента. Но поисковой системе сложно определить, какую версию индексировать, и это впоследствии отражается в их результатах поиска. И поскольку идентичные версии продолжают конкурировать друг с другом, это снижает производительность для всех из них.

Дублированный контент может стать серьезной проблемой, в основном для владельцев веб-сайтов электронной коммерции, которым необходимо найти способ сообщить Google, какие части своего веб-сайта нужно индексировать, а какие оставить скрытыми.

С этой целью вы можете использовать robots.txt disallow для фильтров и параметров, или вы можете реализовать канонизированные URL-адреса. Но, как упоминалось в первой части этой статьи, будьте очень осторожны с тем, что вы реализуете, так как даже небольшое изменение может иметь негативные последствия.

Вредят ли вашему сайту проблемы с дублированным контентом?

Не тратьте краулинговый бюджет на дублирующийся контент. Выполните быструю проверку с ContentKing, чтобы исправить любые проблемы, препятствующие индексации.

11.Используйте внутренние ссылки и избегайте использования nofollow

Внутренние ссылки играют огромную роль в том, чтобы Google понимал тематику вашего веб-сайта и его внутреннюю иерархию. Внедряя стратегически размещенные внутренние ссылки, вы упростите для Google понимание того, о чем ваш контент и как он помогает пользователям.

Убедитесь, что вы избегаете использования атрибута rel = "nofollow" во внутренних ссылках, поскольку значение атрибута nofollow сигнализирует Google, что он не должен переходить по ссылке на целевой URL.Это приводит к тому, что значение ссылки также не передается.

Если вам нужно быстро проиндексировать новые страницы, продумайте, как вы будете на них ссылаться.

Добавление внутренних ссылок на вашу домашнюю страницу и области всего сайта, такие как верхний и нижний колонтитулы, значительно ускорит процесс сканирования и индексации.

Рассмотрите возможность создания динамических областей на вашей домашней странице, в которых будет отображаться ваш последний контент, будь то сообщение в блоге, новостная статья или продукт.

Вы также можете использовать ссылки в мегаменю, в которых перечислены последние URL-адреса в различных таксономиях вашего сайта.

12. Создавайте релевантные обратные ссылки на ваш контент

Не будет преувеличением сказать, что построение ссылок — одна из важнейших дисциплин в этой области. По общему мнению, ссылки более чем на 50 процентов способствуют успеху вашего SEO.

По входящим ссылкам, часто называемым обратными ссылками, Google может обнаружить ваш веб-сайт. А поскольку ссылки также передают часть своего авторитета, вы будете индексироваться быстрее, если обратная ссылка идет с авторитетного веб-сайта, и это значительно повлияет на ваш рейтинг.

Чтобы помочь вам улучшить параметры индексации и ранжирования, вот целый список высокоэффективных стратегий построения ссылок.

13. Создавайте ажиотаж вокруг своего контента в социальных сетях

Ранее в этой статье мы упоминали, что Google стал намного строже в том, что касается того, какой контент они индексируют. Когда вы создаете ажиотаж вокруг своего контента в социальных сетях, это сигнализирует Google, что контент популярен, что ускоряет процесс индексации. Например, размещение вашего контента в Twitter вместе с несколькими популярными хэштегами действительно может помочь ускорить процесс индексации.

Вдобавок к этому, создание ажиотажа вокруг вашего контента также приведет к включению в информационные бюллетени и обратным ссылкам!

Вывод

Правильная индексация вашего сайта в Google может оказаться адской работой. Вам предстоит решать множество технических задач, а также задач, связанных с содержанием и связью с общественностью. А с недавним обновлением ядра Google в мае 2020 года индексировать новые страницы стало еще сложнее.

Но при наличии правильной стратегии и контрольного списка вы можете заставить Google индексировать наиболее важные части вашего веб-сайта и повысить эффективность SEO за счет высоких рейтингов.

Часто задаваемые вопросы

Как проиндексировать свой веб-сайт в Google и найти его в Интернете

Знаете ли вы, что более половины трафика веб-сайта поступает из результатов обычного поиска?

Поисковые системы, особенно Google, играют огромную роль в том, как люди находят контент в Интернете. Если ваш веб-сайт не проиндексирован в Google, вы упустите значительную часть своего потенциального трафика.

В этом посте мы рассмотрим, как проиндексировать ваш веб-сайт в Google, чтобы ваше содержание отображалось в результатах поиска и привлекало больше посетителей на ваш сайт.

Хотите быстро проверить SEO вашего сайта? Попробуйте наш бесплатный инструмент проверки SEO и получите отчет SEO менее чем за 60 секунд.

Как у вашего сайта SEO?

Воспользуйтесь нашим бесплатным инструментом, чтобы подсчитать свой результат менее чем за 60 секунд.

Что такое индексация?

Индексирование — это процесс, с помощью которого Google добавляет страницы в свою базу данных, чтобы отображать их в результатах поиска. В своем индексе Google отслеживает страницы и информацию о тех страницах, которые он использует для ранжирования.

Как работает индексирование Google

Чтобы показать пользователям наиболее релевантные результаты поиска по их запросам, Google сканирует Интернет в поисках контента. Затем он индексирует его. Когда кто-то выполняет поиск, Google ранжирует контент в зависимости от того, насколько он соответствует потребностям пользователя.

Google использует ботов, называемых пауками или поисковыми роботами, для сканирования Интернета в поисках контента. Эти пауки открывают страницы по ссылкам.

Когда паук находит страницу, он собирает информацию о ней, которую Google использует, чтобы понять и оценить ее.Он хранит эту информацию в своем индексе, чтобы она была легко доступна, когда пользователь выполняет поиск. Индекс Google содержит сотни миллиардов страниц.

Google периодически повторно просматривает страницы, что позволяет ему собирать информацию о внесенных в них обновлениях.

Когда пользователь вводит поисковый запрос в Google, Google извлекает наиболее релевантные страницы из своего индекса. Затем алгоритмы поиска Google ранжируют контент так, чтобы лучший контент появлялся в верхней части результатов. Этот процесс происходит за доли секунды.

Как проверить, проиндексирован ли ваш сайт

Один из лучших способов проверить, проиндексирован ли ваш сайт, — это использовать Google Search Console. Если вы зарегистрированы в Google Search Console и имеете доступ к аккаунту своего веб-сайта, вы можете перейти к отчету «Покрытие» в разделе «Индекс».

В этом отчете вы увидите несколько категорий и количество страниц на вашем веб-сайте в каждой категории. Эти категории:

  • Действительный: Действительные страницы успешно проиндексированы без ошибок.
  • Действительно с предупреждениями: Эти страницы проиндексированы, но есть проблемы со страницами.
  • Ошибка: Эти страницы не были проиндексированы из-за ошибки.
  • Исключено: Это страницы, которые не были намеренно проиндексированы.

Вы можете переходить на разные страницы, чтобы узнать, почему они не были проиндексированы, и, возможно, исправить какие-либо проблемы.

Если вы выполните поиск по определенному URL-адресу в строке поиска инструмента проверки URL-адресов в верхней части страницы, вы сможете увидеть, проиндексирована ли эта страница.

Еще один способ проверить, проиндексирован ли ваш сайт, — это выполнить поиск по сайту в Google.

Просто выполните поиск по запросу «site:» плюс URL-адрес вашего веб-сайта в Google. После этого вы увидите, сколько страниц вашего веб-сайта находится в индексе Google. Вы можете использовать тот же метод, чтобы проверить, проиндексирован ли конкретный URL.

Вы также можете использовать нашу бесплатную программу проверки SEO, чтобы получить отчет о поисковой оптимизации вашего веб-сайта. Отчет включает анализ сканирования и индексации, который поможет вам выявить любые ошибки и обеспечить правильное сканирование и индексирование вашего веб-сайта.

Как проиндексировать ваш сайт в Google

Итак, как вы можете заставить Google проиндексировать ваш сайт? В конечном итоге Google сделает это самостоятельно, если только не возникнет ошибка. Однако есть шаги, которые вы можете предпринять, чтобы помочь Google найти ваш сайт и потенциально ускорить процесс. Вот как проиндексировать ваш сайт в Google.

Способы помочь Google найти, просканировать и проиндексировать ваш сайт

Вот некоторые из лучших способов помочь Google найти, просканировать и проиндексировать ваш веб-сайт.

Создание карты сайта XML

Карта сайта XML — это список URL-адресов на вашем веб-сайте с информацией об этих страницах.

Карта сайта помогает Google перемещаться по вашему сайту и находить страницы, которые вы хотите проиндексировать.

Вы можете создать карту сайта в формате XML вручную или создать карту сайта, которая автоматически обновляется с помощью таких инструментов, как плагины.

Вот пример карты сайта с одним URL-адресом из sitemaps.org.

Используйте внутренние ссылки

Google сканирует Интернет, переходя по ссылкам, поэтому создание ссылок между страницами вашего веб-сайта — отличный способ помочь Google найти ваши страницы.Убедитесь, что ваши страницы связаны между собой, и всегда добавляйте ссылки на новый контент после публикации.

Если вы хотите, чтобы новая страница сканировалась особенно быстро, сделайте ссылку на нее с одной из самых эффективных страниц, поскольку Google повторно сканирует эти типы страниц чаще. Убедитесь, что у ваших внутренних ссылок нет тега rel = «nofollow», поскольку Google не будет сканировать ссылки nofollow.

Создавайте уникальный ценный контент

Google часто говорит, что издателям следует сосредоточиться на создании уникального высококачественного контента.Убедившись, что ваш контент соответствует этому описанию, может помочь Google проиндексировать ваш сайт.

Создавайте страницы, которые представляют ценность для пользователей, например, предлагая действенные советы или исчерпывающие ответы на вопрос. Избегайте создания страниц с небольшим количеством полезного контента или с тем же содержанием, что и другие страницы вашего сайта.

Избавьтесь от некачественных страниц

Чем больше страниц у вашего веб-сайта, тем больше времени потребуется Google на их сканирование. Если вы удалите некачественные страницы со своего сайта, вы предотвратите расходование на них «краулингового бюджета», и Google быстрее доберется до ваших самых важных страниц.

Этот совет особенно полезен для крупных сайтов с более чем несколькими тысячами URL-адресов. Однако большинству сайтов полезно удалить некачественный контент. Избавление от этого содержания не только поможет вам в полной мере использовать свой краулинговый бюджет, но и повысит общее качество вашего сайта.

Строить обратные ссылки

Еще один совет о том, как проиндексировать ваш сайт в Google, — создать обратные ссылки — ссылки с других сайтов на ваш. Как внутренние ссылки помогают поисковым роботам Google находить ваш сайт, так и обратные ссылки.

Если вы создаете полезный высококачественный контент, вы должны зарабатывать обратные ссылки естественным образом, когда люди обнаруживают ваш контент. Другие издатели захотят разместить ссылку на ваш контент, если это принесет пользу их страницам.

Вы также можете создавать обратные ссылки, обращаясь к издателям и прося их указать ссылку на одну из ваших страниц. Ищите страницы, на которых ссылка на ваш сайт может быть полезной. Например, вы можете предложить ссылку на одну из своих страниц вместо устаревшей, неработающей ссылки.

Независимое исследование Clutch назвало

WebFX — лучшая SEO-компания в США.

Более 200 клиентов WebFX были опрошены Clutch, чтобы обсудить их опыт сотрудничества с нами.

Ознакомьтесь с другими обзорами сцепления

Как убедиться, что вы случайно не заблокируете поисковые роботы Google

Существует ряд технических проблем, из-за которых Google может не сканировать и не индексировать ваш веб-сайт или отдельные страницы на вашем веб-сайте.Предотвращение и исправление этих ошибок — еще один важный аспект того, как индексировать ваш сайт в Google.

Чтобы проверить наличие этих проблем, просмотрите отчет «Покрытие» в Google Search Console или выполните поиск по URL с помощью инструмента проверки URL в Google Search Console.

Вот некоторые из этих проблем, а также способы их предотвращения и устранения.

Проверьте файл robots.txt

Если файл robots.txt на вашем веб-сайте настроен неправильно, это может помешать роботам Google сканировать ваш веб-сайт.

Что такое файл robots.txt? Это простой текстовый файл, который находится в корневом каталоге вашего сайта и сообщает ботам, например сканерам поисковых систем, какие страницы сканировать, а какие избегать.

Если ваш файл robots.txt настроен неправильно, вы можете случайно «запретить» роботам Google сканировать ваш сайт, его части или определенные страницы, которые вы хотите проиндексировать.

Чтобы исправить эти проблемы, удалите из файла соответствующие директивы «запретить».

Вот пример простого файла robots.txt от Google. Этот файл robots.txt не позволит роботу Googlebot сканировать папку. Это позволит всем остальным сканерам получить доступ ко всему сайту.

Проверьте свои теги noindex

Еще один способ заблокировать индексирование страницы — это включить тег noindex в раздел HTML-файла страницы. Тег noindex выглядит примерно так:

Если вы случайно добавили один из этих тегов на страницу, эта страница не будет проиндексирована.Чтобы решить эту проблему, удалите тег.

Проверьте свои канонические теги

Канонические теги сообщают Google, какая версия страницы является главной и должна быть проиндексирована. Этот тег полезен, если у вас есть дублирующийся или похожий контент по разным URL-адресам.

Канонические теги помещаются в раздел HTML-документа и выглядят следующим образом:

Если канонический тег на странице, которую вы хотите проиндексировать, указывает на другую страницу или даже на несуществующую страницу, эта страница не будет проиндексирована.

Чтобы решить эту проблему, измените тег и укажите в нем правильный URL, даже если это текущий URL. Канонический тег, который ссылается на текущий URL-адрес, называется каноническим тегом, ссылающимся на себя.

Как запросить индексацию у Google

Если вы последуете приведенным выше советам, Google в конечном итоге самостоятельно просканирует ваш сайт. Однако вы можете ускорить процесс, запросив сканирование нового сайта или страницы или повторное сканирование существующих страниц.

Вот как проиндексировать ваш веб-сайт в Google, запросив сканирование непосредственно у Google.

Чтобы отправить в Google сразу несколько URL-адресов, вы можете отправить карту сайта через консоль поиска Google. В разделе «Сканирование» в меню слева нажмите «Файлы Sitemap». На этой странице вы можете отправить карты сайта в Google и просмотреть ранее отправленные карты сайта.

Еще один способ попросить Google просканировать карту сайта — это отправить HTTP-запрос GET с помощью функции «ping». Введите запрос, используя следующую формулу, в браузере или в командной строке.

  • https: // разработчики.google.com/search/docs/advanced/sitemaps/build-sitemap;

Если вы хотите отправить один URL-адрес или несколько URL-адресов, используйте инструмент проверки URL-адресов в консоли поиска Google. Сначала проверьте URL-адрес, введя его в строку поиска. Затем нажмите «Запросить индексирование», чтобы отправить URL в Google.

Затем инструмент выполнит несколько проверок, чтобы убедиться, что на странице нет серьезных проблем. Если страница проверяется, инструмент ставит ее в очередь для индексации.

Обратите внимание, что вы должны быть владельцем или полноправным пользователем свойства Search Console, чтобы отправить URL-адрес в Google для индексации с помощью инструмента проверки URL-адресов.

Другой вариант — использовать Google Indexing API для уведомления Google о новых страницах. Однако этот инструмент предназначен для сайтов с большим количеством недолговечных страниц, и вы можете использовать его только на тех страницах, где размещаются объявления о вакансиях или прямые трансляции.

Следующие шаги после того, как Google проиндексирует ваш сайт

Чтобы люди могли найти ваш веб-сайт в поиске Google, Google должен иметь возможность его проиндексировать. С помощью приведенных выше советов вы можете убедиться, что ваши страницы индексируются, и ускорить процесс индексации.

Не забывайте также часто проверять наличие ошибок сканирования в Google Search Console. Вы также можете повторно отправить свои карты сайта при их обновлении или запросе индексации для новых URL-адресов.

Хотите, чтобы Google проиндексировал ваш сайт? В WebFX мы имеем более чем 25-летний опыт работы в цифровом маркетинге и команду отмеченных наградами экспертов по SEO.

У нас есть навыки и знания, чтобы проиндексировать ваш сайт — и повысить его рейтинг! Запросите бесплатное ценовое предложение онлайн или позвоните нам по телефону 888-601-5359 , чтобы узнать больше.

9 быстрых и простых способов проиндексировать ваш сайт в Google

Хотите узнать, как проиндексировать свой веб-сайт в Google, чтобы он отображался в результатах поиска?

Когда пользователь выполняет поиск, Google использует свой индекс для поиска наиболее релевантного содержания, соответствующего поиску. Это означает, что если ваш веб-сайт не проиндексирован, значит, его нет в поисковой системе Google. И это будет плохой новостью, если вы хотите привлечь на свой сайт обычный трафик.

Итак, в этом посте мы покажем вам 9 быстрых и простых способов проиндексировать ваш сайт в Google.Мы также объясним, что такое индекс Google и как проверить, проиндексировал ли Google ваш сайт.

Что такое индекс Google?

Индекс Google — это просто список всех веб-страниц, которые Google просканировал и о которых знает. Если Google не проиндексирует ваш сайт, он не появится в результатах поиска.

Никто не найдет ваш сайт, что не пойдет на пользу бизнесу… Теперь вы, вероятно, понимаете, почему индексирование имеет решающее значение для ранжирования в Google.

Поскольку в этом посте много сложных слов, мы начнем с определения нескольких ключевых терминов, чтобы вы знали, о чем мы говорим:

  • Индексирование — процесс сохранения веб-страниц в индексе (базе данных) Google
  • Сканирование — процесс перехода по гиперссылкам в Интернете для обнаружения нового содержания
  • Googlebot / web spider — программное обеспечение Google, которое систематически ищет в Интернете новое содержание по ссылкам

Теперь, когда вы знаете, что означают эти ключевые термины, давайте посмотрим, как теперь проиндексировать ваш веб-сайт в Google.

Как проиндексировать ваш сайт в Google

Как уже упоминалось, Google использует свой индекс для поиска и отображения наиболее релевантного контента, когда пользователи выполняют поиск. Это означает, что Google должен иметь возможность найти ваш веб-сайт, чтобы проиндексировать и отобразить его в результатах поиска.

К счастью, вы можете сделать несколько вещей, чтобы поисковый гигант проиндексировал ваш сайт.

Поскольку это всеобъемлющий пост, вы можете щелкнуть эти быстрые ссылки, чтобы сразу перейти к различным разделам:

  1. Проверьте настройки WordPress для видимости в поисковых системах
  2. Добавьте свой веб-сайт в Google Search Console
  3. Создайте XML-карту сайта
  4. Отправьте свой Sitemap в Google Search Console
  5. Оптимизируйте своих роботов.txt
  6. Проверьте свои теги Noindex
  7. Удалите ссылки Nofollow
  8. Создайте внутренние ссылки на своем веб-сайте
  9. Создайте высококачественные обратные ссылки

Как проверить, проиндексировал ли Google ваш веб-сайт

1. Проверьте настройки WordPress для видимости в поисковых системах

Для начала вам нужно убедиться, что ваш сайт WordPress виден поисковым системам.

Вы можете легко проверить это, перейдя в настройки »Чтение страницы и прокрутив вниз до опции Видимость в поисковой системе .

Не забудьте снять флажок с этого параметра, чтобы поисковые системы могли индексировать и сканировать ваш веб-сайт.

А теперь перейдем к тому, как отправить свой веб-сайт в Google.

2. Добавьте свой веб-сайт в Google Search Console

Google Search Console, ранее известная как «Инструменты Google для веб-мастеров», представляет собой бесплатную услугу, доступную для всех владельцев веб-сайтов.

Он показывает вам, как Google индексирует и добавляет ваш сайт в результаты поиска Google, чтобы вы могли быть уверены, что нужные люди видят ваш сайт.

Вы можете легко отправить свой веб-сайт в Google Search Console и проверить, проиндексированы ли ваши веб-страницы, используя лучший плагин SEO для WordPress All in One SEO (AIOSEO).

Для начала перейдите к Общие настройки в меню All in One SEO , а затем щелкните вкладку Инструменты для веб-мастеров .

Теперь перейдите в консоль поиска Google и скопируйте тег подтверждения HTML. Если вы еще не добавили свой сайт, ознакомьтесь с нашим руководством о том, как добавить консоль поиска Google на свой сайт WordPress.

Затем щелкните блок Google Search Console и вставьте HTML-тег в поле Google Verification Code .

Затем вернитесь в консоль поиска Google и нажмите кнопку Проверить .

Google Search Console будет искать HTML-тег в коде вашего сайта и покажет вам сообщение Подтверждено право собственности .

Вы подтвердили свой веб-сайт с помощью Google Search Control и убедились, что он проиндексирован.

Примечание: Если вы не видите это сообщение, вам необходимо очистить кеш WordPress. Это гарантирует, что Google сможет установить последнюю версию вашего сайта.

Теперь все, что вам нужно, — это немного терпения, поскольку ваш сайт не будет проиндексирован в одночасье. Это займет некоторое время, но есть способы ускорить процесс индексации. Давайте посмотрим, как ускорить индексацию вашего сайта WordPress поисковыми системами.

3. Создайте XML-карту сайта

Карта сайта помогает поисковым системам легко перемещаться по содержанию вашего сайта.Он предоставляет им список всего вашего контента в машиночитаемом формате.

Он также сообщает поисковым системам, какие ссылки на вашем веб-сайте более важны, чем другие, и как часто вы обновляете свой сайт.

Sitemap чрезвычайно полезны, когда вы впервые запускаете блог или создаете новый веб-сайт, потому что на большинстве новых веб-сайтов еще нет такого количества внутренних ссылок или обратных ссылок.

Итак, создав карту сайта в формате XML, вы можете убедиться, что ваш новый контент, а также все ваши важные сообщения и страницы индексируются поисковыми системами.

Самый простой способ создать карту сайта в формате XML — использовать AIOSEO, и мы покажем вам, как это сделать дальше. Лучше всего то, что он автоматически уведомляет поисковые системы всякий раз, когда вы публикуете, обновляете или удаляете контент на своем веб-сайте.

Кроме того, карта сайта включена по умолчанию, поэтому вам нужно только установить AIOSEO, и все готово!

Включение XML-файла Sitemap в AIOSEO

Для начала перейдите к Sitemaps в меню All in One SEO . Затем нажмите Общая карта сайта в верхнем главном меню навигации.

Это откроет окно General Sitemap, где вы увидите, что Enable Sitemap включен.

После этого вы можете продолжить и нажать кнопку Открыть карту сайта , чтобы просмотреть свою карту сайта в формате XML.

Открыв карту сайта, вы увидите страницу индекса для карты сайта XML, которая выглядит следующим образом:

Вот и все!

Теперь вы можете быть уверены, что Google будет знать обо всех ваших веб-страницах и сможет отображать их в результатах поиска.

Подробнее о том, как настроить карту сайта, вы можете прочитать в нашей публикации о том, как создать карту сайта в WordPress.

4. Отправьте свой файл Sitemap в консоль поиска Google

Следующим шагом является отправка вашей XML-карты сайта в Google Search Console.

Просто войдите в свою учетную запись Google Search Console и выберите свой веб-сайт.

Затем перейдите к Sitemaps в левой части экрана и добавьте последнюю часть URL-адреса вашей карты сайта (sitemap.xml) в разделе Добавить новую карту сайта и нажмите кнопку Отправить .

Вот и все!

После того, как Google просканирует и проиндексирует ваш сайт, вы начнете видеть отчеты в консоли поиска.

5. Оптимизируйте файл Robots.txt

Файл robots.txt является мощным инструментом SEO, поскольку он работает как руководство по веб-сайту для роботов или роботов, выполняющих сканирование поисковых систем. Как вы уже догадались, важно, чтобы ваш robots.txt давал Google разрешение на сканирование сайта.

С другой стороны, страницы wp-admin обычно запрещают, поскольку они бесполезны для посетителей и необходимы для сканирования Google. Указание Google не сканировать ненужные страницы может помочь повысить рейтинг в поисковых системах и увеличить скорость страницы.

Но когда дело доходит до индексации, вам нужно убедиться, что ваши страницы доступны для сканирования и что вы не запретили какие-либо важные URL. Вместо этого вы можете указать ботам Google разрешить сканирование для определения приоритета этих URL-адресов.

Подробнее читайте в нашем посте о том, как редактировать файл robots.txt в WordPress.

6. ​​Проверьте свои теги Noindex

Иногда вам может потребоваться исключить страницу из результатов поиска Google, поскольку она не имеет отношения к содержанию вашего веб-сайта. Или вы просто хотите защитить свою конфиденциальность и отпугнуть нежелательных пользователей.

При этом, если определенные страницы не проиндексированы, возможно, у них нет тегов noindex.

Самый простой способ проверить это — использовать Google Search Console. После входа в свою учетную запись просто перейдите на вкладку Покрытие в левом меню и найдите сообщение: Исключено тегом «noindex» .

Если вы видите это сообщение, вам нужно вернуться к настройкам WordPress »Чтение (как мы показали вам ранее) и проверить, не установлен ли флажок Запрещать поисковым системам индексировать этот параметр этого сайта.

Если этот параметр отмечен, вам необходимо снять его и нажать кнопку Сохранить изменения .

Но если это не так, следующий шаг — проверить, являются ли ваши URL-адреса nofollow. Далее мы объясним почему.

7. Удалите ссылки Nofollow

Когда робот Googlebot обнаруживает ссылки nofollow, он сообщает Google, что ему следует удалить эти ссылки из своего индекса. Поэтому вам нужно обязательно удалить внутренние ссылки nofollow.

Просто найдите атрибут ссылки rel = «nofollow» и удалите его. Вы можете сделать это прямо из HTML-кода или с помощью редактора блоков WordPress. Чтобы узнать больше, посетите, как добавить ссылки nofollow в WordPress.

8. Создайте внутренние ссылки на своем веб-сайте

Один из наиболее эффективных способов поощрения сканирования и повышения индексации вашего веб-сайта — использование внутренних ссылок.

Пути, по которым ползучие пауки проходят по сети, образуются ссылками. Когда одна страница ссылается на другую страницу, паук следует по этому пути.

Таким образом, вам следует сосредоточиться на создании ссылок на все ваши самые важные страницы. Это сообщает Google, а также посетителям вашего веб-сайта о вашем новом и важном содержании. Вы можете найти более подробную информацию о внутренних ссылках в нашем контрольном списке для SEO.

9. Создавайте качественные обратные ссылки

Google признает, что страницы заслуживают доверия, если на них регулярно ссылаются авторитетные веб-сайты.Другими словами, обратные ссылки также сообщают Google, что страницу следует проиндексировать.

Если вы хотите знать, как создавать обратные ссылки, ознакомьтесь с нашим постом о 30 SEO-приемах, которые гарантированно увеличат ваш трафик.

Как проверить, проиндексировал ли Google ваш веб-сайт

Мы почти закончили, но сначала мы покажем вам 2 простых и быстрых способа проверить, проиндексировал ли Google ваш сайт:

1. Проверьте свои URL-адреса с помощью консоли поиска Google

Для начала вы можете проверить свои веб-страницы с помощью инструмента проверки URL в Google Search Console.

Для этого перейдите к инструменту URL Inspection .

Затем вставьте URL-адрес, который нужно проиндексировать, в строку поиска и дождитесь, пока Google проверит URL-адрес. Если он проиндексирован, вы увидите зеленую галочку с текстом « URL находится в Google ».

Если URL не проиндексирован, нажмите кнопку Запросить индексирование , и все.

2. Используйте Google, чтобы узнать, проиндексирован ли ваш сайт

Вы также можете использовать Google, чтобы узнать, проиндексирован ли ваш сайт.Просто зайдите в Google и введите поисковый запрос site: yourwebsite.com .

Как в этом примере:

Число прямо под поиском показывает, сколько примерно ваших страниц проиндексировал Google.

И если вы хотите проверить статус индекса определенного URL-адреса, используйте тот же процесс, но вместо этого используйте полный URL-адрес.

Например, site: yourwebsite.com/web-page-slug .

Если URL не проиндексирован, результатов не будет, и вы можете запросить индексацию в Google Search Console.

И вот оно!

Мы надеемся, что этот пост помог вам научиться индексировать свой сайт в Google. Воспользуйтесь этими советами, чтобы ускорить процесс индексирования вашего сайта, и он появится в результатах поиска раньше, чем вы об этом узнаете.

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *