Как индексировать свою страницу Вконтакте

Как диагностировать и решить проблему с индексацией на вашем сайте быстро и при минимальных затратах?

Последнее обновление: 14 февраля 2023 года

Время прочтения: 9 минут

О чем статья:

• Какие основные проблемы возникают при индексации страниц
• Какие ниши бизнеса больше всего страдают от проблем с индексацией
• Что мешает индексации сайта?
• Как узнать, есть ли проблемы с индексацией у вашего сайта?
• Как исправить проблему с индексацией
• Как настроить Google Indexing API
• Могут ли быть проблемы с индексацией в Яндексе
• Выводы

Для кого статья:

• Маркетологов;
• Специалистов по SEO;
• Агентств по продвижению сайтов.

Как решать проблемы с индексацией, какие ниши бизнеса они затрагивают и как получить максимум результата при минимуме ручного труда? Об этой и других проблемах с попаданием страниц в индекс поисковиков на конференции Optimization-2022 рассказал Захар Федоренко, SEO Team Lead в Rush Agency.

Добавляем сайт в поисковики Яндекс и Google для быстрой индексации #1

Какие основные проблемы возникают при индексации страниц

На момент написания статьи мы говорим о проблемах индексации применительно в основном к поисковой системе Google. Дело в том, что в другом популярном поисковике, Яндексе, такие проблемы на сегодня практически не возникают. А вот в Google очень многие сайты сталкиваются с тем, что:

1. Страницы не попадают в индекс;
2. Страницы очень долго попадают в индекс;
3. При изменении контента в индексе очень долго остается старая версия документа.

Чем это плохо для бизнеса:

• Если страниц нет в индексе, то они не приносят поисковый трафик
• Сайт получает низкий краулинговый бюджет, что, в свою очередь, снижает квоту на индексацию страниц.

Все это затрудняет поисковое продвижение сайта.

Мнение эксперта

Захар Федоренко, SEO Team Lead в Rush Agency:

«Многие говорят: SEO – это долго. На самом деле можно сделать так, чтобы в срок до четырех дней роботы узнали о ваших изменениях и ранжировали ваш сайт лучше».

Какие ниши бизнеса больше всего страдают от проблем с индексацией

В целом сложности индексации затрагивают все тематики. Приведем наиболее яркие примеры.

1. Онлайн-магазины. Например, ecom-проект внедряет теговые категории, которые потенциально являются довольно крупными точками роста. Если они не попадают в индекс, они не дают профита, и бизнес теряет деньги, а SEO-специалисты не видят результат своей работы.

2. Информационные сайты. Здесь ситуация аналогична: отсутствие индексации новых блоков не позволяет страницам получать органический трафик.

Мнение эксперта

Захар Федоренко, SEO Team Lead в Rush Agency:

«Приведу пример: мы на сайте создали блог, сделали новые категории, постепенно заполняли их контентом. Робот Google один раз зашел, увидел, что блог пустоват, запомнил это. И, сколько мы далее не публиковали статьи, они не индексировались, пока я не активировал бота. Как – расскажу ниже».

Как вывести группу вконтакте в топ яндекс и гугл?

3. Сайты услуг. Например, в нише онлайн-образования страница может долго не попадать в индекс или даже выпадать из него – такое наблюдалось весной-летом 2022 года после обновления поисковых алгоритмов Google. При этом, когда документы индексируются, они начинают приносить много трафика.

4. Лендинги. Google вообще скептически относится к сайтам, у которых мало страниц, поэтому плохо индексирует лендинги. Тем не менее возможно даже новый небольшой сайт проиндексировать достаточно быстро, за несколько дней, не тратя при этом дополнительный бюджет.

Что мешает индексации сайта?

Для начала проанализируем, почему робот не хочет заходить на проект.

Техническая оптимизация сайта – банальное требование, про которое знают все, тем не менее зачастую оно является причиной отказа в индексации. Проверьте, что у вас есть правильно настроенный файл robots.txt, карта сайта sitemap.xml, отсутствуют нерабочие ссылки, дубли страниц и метатегов. Так же важно, что все страницы, которые потенциально могут приносить трафик, давали ответ сервера 200 ОК.

Читать по теме: более подробно о техническом аудите можно узнать в статье «План идеального SEO-аудита сайта».

Также важна внутренняя перелинковка. Например, в онлайн-магазине желательны расширенные «хлебные крошки», сквозные ссылки, связывающие категории. В карточке товара нужен блок с похожими либо дополнительными товарами. На информационном сайте хорошо работают подборки «Похожие статьи», «Другие статьи автора» им подобные.

На индексацию в Goоgle очень сильно влияет скорость загрузки сайта. Вопреки распространенному мнению, что улучшение скорости загрузки дает выгоду в виде повышения позиций, на многих проектах на практике на ранжировании скорость загрузки не отражается. Зато она сильно улучшает индексацию. Если сайт долго грузится, робот может просто уйти вместо перехода по нужным вам ссылкам и добавления их в индекс.

Мнение эксперта

Мнение эксперта: Захар Федоренко, SEO Team Lead в Rush Agency:

«Что можно сделать со скоростью загрузки? Обычно оптимизатор ставит ТЗ разработчику на ускорение загрузки сайта. Выглядят эти ТЗ достаточно однотипно: скриншот теста сайта из PageSpeed Insights с указанием, что этот и тот параметры надо улучшить. Это не мотивирует программиста.

Советую взять несколько основных конкурентов помимо вашего сайта и проверить в PageSpeed Insights главные страницы, страницы категория, несколько карточек товаров. После чего сделайте табличку, в которой наглядно отразите ваши данные и показатели конкурентов. На этом основании вы можете аргументированно требовать определенных значений скорости загрузки вашего сайте».

Алгоритмы поисковых систем охватывают весь мир. Google держит в индексе огромное количество адресов, и неудивительно, что случаются сбои. Например, у компании был не очень хороший сайт, поэтому были проведены работы по его улучшения, обновили качественным и полезным контентом. Но робот как запомнил один раз ресурс с низким качеством, так и перестал на него заходить. Ниже расскажем, как добиться, чтобы алгоритм совершил переобход страниц.

Низкое качество страниц означает несоответствие сайта критериям Google Page Quality. Мы подробно рассказывали о них в статье «Что такое алгоритм E-A-T и как делать контент, который полюбит Google?». Добиться релевантности этим метрикам можно разными путями. Например, использовать конкурентный анализ.

Откройте топ-10 в вашей тематике и просмотрите сайты конкурентов, выявляя, какие элементы есть у них на страницах, которых нет у вас. Некоторые блоки могут реально сильно влиять на ранжирование, например, онлайн-калькулятор ОСАГО в тематике страховых услуг. Попытайтесь себя внедрить подобный функционал у себя на сайте.

Мнение эксперта

Захар Федоренко, SEO Team Lead в Rush Agency:

«Если вы действительно поработаете над сайтом, сделали аудит контента, подняли его качество, то, когда страница попадет в индекс, она может сразу получать поисковый трафик, соответственно, давать больше лидов и конверсий. При этом новые страницы, которые робот индексирует, могут положительно влиять на индексацию старых. Для этого не надо покупать ссылки, как советуют некоторые, они не способствуют ранжированию. Вам просто надо проинформировать Google о том, что надо проиндексировать или заново обойти такие-то страницы».

Как узнать, есть ли проблемы с индексацией у вашего сайта?

Существует множество инструментов, которые позволяют это сделать. Приведем несколько примеров.

Google Search Console – бесплатный инструмент поисковика. Зайдите в настройки, раздел «Индексирование страниц» и увидите, сколько страниц просканировано роботом, но не проиндексировано.

Справа наверху указано общее количество таких документов. Если у вас довольно много адресов, которые не вошли в индекс, вам надо что-то предпринять по этому поводу. Google Search Console обновляет данные раз в четыре дня, поэтому, если вы хотите видеть результат раньше, вам понадобятся сторонние инструменты.

Rush Analytics – инструмент проверки индексации, куда можно загружать URL и смотреть динамику, графики, выгружать данные в формате для электронных таблиц, строить дашборды, отражающие различные сегменты. На скриншоте ниже можно видеть сравнение количества проиндексированных и не проиндексированных страниц в Google в виде круговой диаграммы.

Также специалисты используют такие сервисы как Screaming Frog SEO Spider, A-Parser, SiteAnalyzer, Key Collector для проверки индексации страниц.

Как исправить проблему с индексацией

Допустим, вы увидели, что большое количество страниц с сайта не проиндексировано. Что делать? Расскажем пошагово.

1. Проверьте, корректно ли Google отображает сайт. Этому может препятствовать использование JavaScript или то, что в robots.txt закрыты некоторые скрипты, стили, изображения. Тогда робот видит сайт недооформленным и считает его некачественным. Попробуйте выключить JavaScript в браузере и посмотреть, корректно отображаются основные элементы на странице либо нет.

Затем в Google Search Console введите адрес страниц, которые вас интересуют, и в режиме реального времени увидите, как поисковик видит вашу страницу. Также в кеше выдачи можно посмотреть сохраненную копию страницы, как она выглядела до внесения вами изменений.

3. Проработайте структуру сайта и его внутреннюю перелинковку. Чем перелинковка лучше, тем больше вероятность, что страница попадет в индекс. Вероятно, используется фактор внутреннего веса страницы, и если документ оказывается в тупиковой зоне, робот может решить, что он не столько важен, чтобы его индексировать.

4. Проверьте корректность файла robots.txt. Проверьте, что не запрещены для индексации элементы, влияющие на внешний вид сайта.

5. Проверьте наличие и корректность sitemap.xml, и обязательно сделайте его доступным в Google Search Console. Иногда после этого добавления Google Search Console все равно показывает, что в индексе ноль URL. Часто причиной является низкая скорость загрузки страниц, когда sitemap генерируется при запросе и это занимает более 5 секунд.

Тогда нужно сделать sitemap статическим и обновлять его не при каждом запросе, а с установленной периодичностью. Также полезно добавить в robots.txt ссылку на sitemap. Иногда после этого робот Google начинает обходить ссылки из карты сайта.

6. Отправьте адреса нужных страниц через Google Indexing API. Это инструмент поисковой системы, который позволяет, например, проиндексировать за 10 дней более 2,5 миллионов страниц – результат на скриншоте.

Многие думают, что через Google Indexing API можно проиндексировать небольшое количество страниц, так как слышали про лимит в 200 адресов в сутки. На самом деле можно сделать гораздо больше. При помощи этого инструмента многие вещи оптимизатор может делать сам, не делегируя программистам и не дожидаясь, пока у них будет время на задачи SEO.

Мнение эксперта

Захар Федоренко, SEO Team Lead в Rush Agency:

«Почему индексирование столь важно? Потому что после улучшения индексации можно наблюдать корреляцию с ростом органического трафика. Страницы, попадая в индекс, начинают ранжироваться по целевым запросам и улучшают видимость. У нас есть кейсы, где мы не делали ничего, кроме индексации, а документы сразу начинали приносить трафик, выросло число показов и кликов.

Стоит отметить, что рост трафика помимо индексации зависит от SEO-оптимизации страниц, конкуренции и ниши, в которой находится ваш бизнес. Если с этим все в порядке, то, проиндексировав адреса, можно через день-два получить трафик».

Кейс 1

На скриншоте ниже показана динамика запросов, под которые были созданы страницы, не попавшие в индекс. После индексации виден резкий скачок, эти URL заняли топ-1, вошли в топ-10, топ-30.

Динамика запросов довольно резко возрастает после попадания в индекс.

Кейс 2

Был сделан срез запросов конкретно под те страницы проекта, которых не было в индексе Google, порядка 100 000 страниц, важных для сайта. Их отправили на индексацию через Google Indexing API, через неделю сняли позиции, чтобы проследить корреляции. Результат на графике ниже.

Почти по всем запросам страницы начали ранжироваться, приносить трафик, позиции, лиды.

Источник: www.ashmanov.com

Как проиндексировать свою страничку ВКонтакте?

Очень много встречал проиндексированные яндексом, профили ВКонтакте! Подскажите, как можно сделать, чтобы моя страничка оказалась в поике Яндекса и как у многих это получается? Спасибо!

На сайте с 17.05.2009
5 декабря 2010, 08:16

На сколько я знаю индексируются страницы у которых путь /xxx , а не /idyyy То есть индексируются те кто менял адрес страницы 🙂 Хотя возможно сейчас что то изменилось, давно за этим не следил)

5 декабря 2010, 08:20

Сейчас все индексируются, но статусы в индекс не попадает насколько я знаю(кроме профиля) Ссылку не оставить;) Ещё летом эксперименты были))

На сайте с 14.07.2010
5 декабря 2010, 08:53

Stif:
На сколько я знаю индексируются страницы у которых путь /xxx , а не /idyyy
То есть индексируются те кто менял адрес страницы 🙂
Хотя возможно сейчас что то изменилось, давно за этим не следил)

/idyyy индексируется тоже
На сайте с 07.10.2007
5 декабря 2010, 13:13
Stif:
То есть индексируются те кто менял адрес страницы
Уже менял адрес страницы. Не помогло!

Evgeniy NN:
Сейчас все индексируются, но статусы в индекс не попадает насколько я знаю(кроме профиля)

Как отдельно профиль проиндексировать? А внесением янднекс веб мастер в «мои сайты» поможет?
На сайте с 11.10.2010
5 декабря 2010, 15:24
Alls:
Как отдельно профиль проиндексировать? А внесением янднекс веб мастер в «мои сайты» поможет?
нет, не поможет
5 декабря 2010, 15:29

Alls:

Как отдельно профиль проиндексировать? А внесением янднекс веб мастер в «мои сайты» поможет?

Нет конечно, попробуйте лучше ссылки проставить на свою страницу со своих сайтов. У меня вот проиндексировалась непонятно почему, может из за того что в профиль серча вставил

Источник: searchengines.guru

Результат эксперимента – добавление новой контентной страницы и её индексация в поисковой системе яндекс и её проверка с помощью строки или rdsbar

На разных форумах народ задаёт странные вопросы, ну, может не странные, но интересные. А именно через сколько индексируются страницы со свежим контентом, как этот процесс ускорить, как узнать проиндексировалась страница(ы) или нет, и другие вопросы, связанные с индексацией страниц в Яндексе и Google.

Конечно же всем хочется чтобы свежий контент залетал в индекс поисковых систем чуть ли не сразу после добавления на сайт. Так вот, такая возможность есть. То есть буквально в этот же день можно получить посетителей с новоиспеченного материала. Дальше всё расскажу.

Но для начала, давайте немного по порядку.

Как узнать и проверить что страница проиндексировалась поисковыми системами?

Для того, чтобы точно узнать есть ваша страница в выдаче поисковых система Яндекса и Гугла, нужно проделать следующую процедуру:

• Скопируйте адрес страницы, которую вы только что опубликовали на своём сайте, портале или блоге. Можно копировать с префиксом http или https, а можно и без него.
• Скопированный url вставляем в поисковую строку Яндекса. Но перед ссылкой допечатываем следующее – «url:» или «site:» , только без кавычек.

Как это должно выглядеть, смотрите на ниже на скриншотах.

Как видите Яндекс нашёл и показывает, что эту страницу он знает и она находится у него в поиске и он может её предложить пользователю.

Так же проделываем и с поиском Гугла, только тут в поисковую строку вместо «site:», пишем «info:»

Второй вариант того, как проверить индексирование страницы

Устанавливаем дополнение в браузер, называется оно RDSbar, присутствует вроде для любого браузера.

По умолчанию оно создаёт дополнительную строку инструментов под адресной строкой браузера, что не очень то удобно, но это лично для меня. Но в настройках этого дополнения можно сделать так чтобы эта панель не отображалась, а дополнение работало по нажатию на кнопку.

Смотрим на скриншоты, и всё поймём.

Как видим, панель сверху занимает всё ширину сайта, при это она не смещает сайт вниз, а накладывается на него, закрывая часть шапки сайта. Если вам это не доставляет неудобств – можете её оставить.

И если заметили, я стрелками обозначил в самом начале кнопку, при нажатии на которую, в этой панель загрузятся данные о той странице, на которой вы находитесь. И самые первые данные в этой панели, я так же обозначил их стрелками, покажут проиндексированность данной страницы в поисковых системах. Смотрим на рисунке ниже.

Если вам, как и мне не нравится эта панель – её можно убрать в настройках этого дополнения. Находите шестерёнку на этой панели, нажимаете – откроются настройки. Переходите на вкладку «Доп.настройки», и убераете галочку «Показать панель информации».

Тут у вас может возникнуть вопрос – «И что, мне теперь каждый раз чтобы проверить страницу или какой-нибудь сайт, всегда заходить в настройки и включать эту панель?» — Нет!

В верхнем правом углу есть кнопка данного расширения, и при клике на неё вы можете узнать ту же информацию, которую вам показывала панель, которую вы в свою очередь скрыли. Смотрите на рисунок ниже как это всё будет.

Как видим на скриншоте выше, статья, с префиксом 90 ещё непроиндексирована в обоих поисковиках, на ней кстати и буду экспериментировать.

С тем как узнать проиндексирована страница или нет, мы разобрались. Приступим к теме того, через сколько времени, часов, дней, или недель свежий материал/контент появляется в глобальных сетях поисковиков.

Через сколько или какое время новый контент появиться в поиске?

В личных кабинетах вебмастера Яндекса и Гугла были инструменты позволяющие быстрее индексировать урлы, которые им давали. Не знаю, может и сейчас они ещё есть, я уже и не пользуюсь ими. Потому что сильного эффекта от них не видно было.

Большинство вебмастеров выявили совсем другие критерии, или назовём их факторами индексации новых страниц. Постараюсь перечислить, но уверен, что их ещё больше. Вот за счёт чего может ускориться индексация.

• Новый контент должен публиковаться регулярно, желательно каждый день, можно через день. Раз в неделю – это, можно сказать, не серьезно. В этом случае индексация может затягиваться.
  Когда публикация выкладывается регулярно, поисковые системы со своими поисковыми роботами этот фактор учитывают, и следовательно будут чаще заходить на ваш сайт и проверять его на наличие свежего контента, изменениях в статьях и другое.
• Ссылки с других ресурсов/сервисов. К примеру, как только вы выложили свеже-написанную статью и опубликовали ее. Желательно поделиться ссылкой на неё в социальных сетях. Так как поисковые роботы постоянно мониторят социальные сети, потому что контент на них постоянно обновляется.
• Контент, он же текст, картинки, видео – должно быть уникальным, это всегда приветствуется поисковыми системами. Конечно, есть случаи, когда неуникальный контент есть в поиске, но он не ранжируется очень высоко поисковиками, то есть, с него вы наврятли получите посетителей.

Моё очень важное наблюдение

И моё наблюдение поможет вам понять когда публикация/статья/контент проходит индексацию, и он начинает приносить трафик. За процессом у Яндекса наблюдать очень даже интересно, а вот у Гугла как-то всё скучно с этим.

А теперь по шагам:

В «Сводке» вебмастера Яндекса есть раздел «История обхода» — по ней можно понять когда роботы яндекса узнали о новом контенте на вашем сайте/блоге. Как он выглядит смотрим ниже.

Из скриншота выше можно понять, что поисковой робот заходил 30 числа и обнаружил новую статью, хотя я её опубликовал на блоге 28 числа. Вот и заметьте, что робот посещает мой блог не каждый день. Кстати, вот эта статья, которую я взял в пример – Результаты перехода с 1251 на ЮТФ-8, можете посмотреть по дате, когда я её опубликовал.

Скажем так — он взял эту статью на заметку. Но это не значит что он её проиндексировал. Можно сказать, что он проверяет её — на уникальность текста, картинок, на ошибки в коде, и прочие критерии.

То, что она не находится в индексе можно посмотреть также в Вебмастере, раздел называется «Обновление поиска».

Этот раздел показывает когда страница начинает участвовать в поиске, то есть стала участницей поисковой выдачи по ключевым запросам. Это значит, что страница официально проиндексирована. Поздравляю!

Но судя по моему разделу, статья за 28 число ещё не попала в индекс, так что буду ждать. Ниже добавлю результат.

И вот, 2 числа страница попадает в индекс поисковой системы Яндекс. Если посчитать по календарю, то получается, что яндексу понадобилось 6 дней для того, чтобы принять её себе в поиск.

Это только часть моего наблюдения, назовём его «официальным добавление в индекс», а теперь о другой стороне этого процесса.

Вот что я однажды заметил. Ну, как всегда, добавляю новые статьи, слежу за индексирование, по каким запросам заходят на ту ли иную статью. И обычно бывает такая ситуация.

Пишу статью, публикую в блоге, жду 3-5 дня в среднем, она появляется в поиске, но по ключевым фразам можно понять – собирает она посетителей или нет. Обычно не очень активно этот процесс проходит.

Захожу в ЯндексМетрику, и в статистике по ключевым словам вижу что посетители идут как раз таки из поисковой системы. Далее всеми способами проверяю на индексацию эту статью, результат — непроиндексирована, значит не может участвовать в поиске. Но вот парадокс – яндексу эта статья понравилась и без индексации.

Вывод. Официально, индексация занимала у меня в средней 3-5 дней, не официально – сразу после публикации.

Так что, кто-то говорит что «всё не просто», а на самом деле – «всё просто». Надо экспериментировать! Что-то я стал часто так говорить. =)

Источник: iformoney.ru