Полезные знания Увеличение трафика путём привлечения поисковых роботов

Kill

Профессионал
Ветеран пробива
Регистрация
3/10/15
Сообщения
3.025
Репутация
8.480
Реакции
20.242
RUB
0
Сделок через гаранта
1
Увеличение трафика путём частого привлечения поисковых роботов
Рейтинг вашего сайта в поисковых системах - один из самых важных факторов, ведущих к успеху проекта.

В связи с этим очень досадно, когда Google игнорирует ваши действия, направленные на оптимизацию и улучшение сайта, в которые вы вложили недели или месяцы работы.

Главной причиной таких обстоятельств является сам процесс индексирования сайтов. Google использует огромное число поисковых роботов, которые блуждают по всей сети и индексируют страницы по ключевым словам, используя продвинутые алгоритмы.

Однако, нет определённых сроков, в пределах которых поисковые роботы Google-а просканируют ваш сайт.

Не стоит расстраиваться, потому что из данной ситуации тоже есть выход. Сделав несколько простых действий, вы можете заставить Google сканировать ваш сайт чаще, что может привести к увеличению рейтинга, а так же отображению актуальной информации в поисковых запросах.

Проверка статистики сканирования вашего сайта
Поскольку частота сканирования варьируется в зависимости от сайта, понять, как часто Google робот анализирует ваш контент можно, посмотрев статистику в (Webmaster Tools).

После первой авторизации в Инструментах, вам нужно будет проделать несколько шагов, чтобы подключить свой сайт.

После этого зайдите в раздел меню “Статистика сканирования” (Crawl Stats). Так выглядят показатели моего онлайн-магазина по продаже кроватей:

140958374201.png


Google предоставляет отчёт лишь за последние 90 дней. Справа отображено количество сканирований сайта, в моём случае данный показатель равен 75 раз в день, с максимальным количеством заходов 8 августа (322 раза):

140958374402.png


Как вы видите, частота проверки сильно отличается в зависимости от дня. Так же вы можете заметить, что несколько месяцев назад сайт анализировался менее 100 раз в день, а несколько дней июня и июля Google робот не заходил ни разу. С тех пор количество сканирований значительно увеличилось. Даннай тенденция так же отображена в показателях последнего месяца.

Существует ряд причин, повлекших за собой данные изменений. Первый фактор - это размер сайта. Мой сайт довольно-таки крупный, на нём можно найти тысячи регулярно обновляемых страниц с кроватями и подробным описанием. Google чаще сканирует крупные сайты с регулярно обновляющимся контентом (несколько раз в день).

Низкая частота сканирования в июне-июле объясняется тем, что в тот период сайт сканировался вручную. С августа я удвоил свои усилия по продвижению, распространив множество внешних ссылок на мой сайт, что повлекло за собой больше сканирований Google роботом.

После моих неудачных действий в июне, главной задачей было увеличение количества сканирований для повышения рейтитинга моего сайта. В то же время я начал использовать канонические теги во избежание дублирования контента, для получения более “чистого” и структурированного списка моих продуктов в поисковом результате. Таким образом, тысячи наименований товаров и сотни ежедневных обновлений поисковым роботом, оправдали мои старания.

Как заставить Google просматривать страницы чаще?
Данный вопрос является самым популярным среди тех, кто ставит перед собой задачу увеличения сканирований Google-ом.

На самом деле, в то время, как одни сайты сканируются по несколько раз в день, другие целыми месяцами могут игнорироваться. Это может сильно расстраивать, когда ты много вкладываешь в сайт, а Google неделями не замечает этих изменений.

Есть несколько способов увеличить частоту просмотров Google робота.

1. Ускорьте загрузку сайта и уменьшите количество серверных ошибок
Алгоритмы Google робота работает лучше, если ваш сайт быстро загружается и выдаёт мало ошибок и битых страниц.

Если во время подключения к сайту возникают проблемы, то вполне вероятно Google будет сканировать его реже. Именно поэтому важно выбирать хороший хоcтинг с надёжными серверами.

Кроме того, время загрузки сайта также влияет на то, как часто Google будет его сканировать. Есть несколько способов оптимизировать данный показатель, но в одну статью они не поместятся. Однако есть простой способ получения списка ошибок и причин, по которым они возникли.

140958374603.png


“Ошибки сканирования” (Crawl Errors) можно найти в разделе “Сканирование”. Как видите, мой сайт неплохо держится, “Ошибки Сайта” не обнаружены. Если посмотреть ниже, в секцию “Ошибки URL”, то можете заметить, что в мае было допущено 2 ошибки, одна в июне, а сейчас их уже нет. Это тоже связано с повышение частоты просмотров в Августе, когда количество ошибок на сервере сократилось до нуля.

2. Регулярно обновляйте свой сайт
Ещё один способ повысить частоту сканирования поисковым роботом - регулярное обновление.

Google предпочитает регулярно обновляемые сайты, и вознаградит ваши усилия частым сканированием страниц, проверяя полноту индексации в поисковой системе.

Это на руку новостным порталам, и не очень выгодно для интернет-магазинов розничной торговли, вроде моего. Контент меняется не так часто как новости, поэтому это затормаживает ведение бизнеса.

В этом случае, наличие блога - как раз то, что нужно, ведь его содержимое может обновляться так часто, как вы этого хотите. Регулярно добавляя новые записи, вы будете провоцировать Google сканировать ваш сайт чаще и чаще.

3. Создавайте больше внешних ссылок
Данный способ может в значительной мере увеличить частоту сканирования страниц, или, наоборот привести к крупным неприятностям, в случае неверного использования.

Google с подозрением относится к слишком большому количеству внешних ссылок на ваш сайт, воспринимая их как спам.

Если вы попытаетесь обхитрить Google, покупая ссылки, или размещая их на сомнительных сайтах типа казино или на сайтах для взрослых, то вскоре заметите, что поисковые роботы вовсе перестанут посещать ваш сайт.

В то же время, чем больше ссылок ведут на ваш сайт с других надёжных веб-адресов, тем чаще Google робот будет вас посещать. Чем свежее ссылки, тем частота сканирований больше.

4. Создайте карту сайта
На самом деле среди разработчиков существуют разногласия, насколько данный приём является действенным.

Для опрделения частоты сканирования вашего сайта, Google учитывает целый ряд факторов, и карта сайта - не самый значительный из них. Частота обновлений, время загрузки страниц и внешние ссылки - вот что действительно важно.

Однако, добавив карту сайта, вы облегчаете Google роботу процесс проверки сайта, указывая именно на то содержимое, которое необходимо просканировать.

К тому же в карте сайта вы может указать показатель частоты обновления страниц. Само по себе, данное значение не повлияет на рейтинг обновлений. Если же вы будете обновлять сайт с указанной частотой, то значительно увеличите частоту сканирования.

5. Посмотрите на ваш сайт как Googlebot
Последний совет на сегодня: воспользуйтесь инструментом “Посмотреть как Googlebot” в Инструментах Вебмастеров:

140958374704.png


Введя определённый URL, вы сможете “принудить” Google просканировать отдельную страницу. Данный способ приводит к мгновенному результату и является одним из 100% способов оповестить Google об обновлении вашего сайта.

Google ограничивает количество ручных сканирований, до 10 раз в месяц для одного аккаунта. Если вы занимаетесь поддержкой нескольких клиентских сайтов под одним и тем же аккаунтом в Инструментах Вебмастеров, то тщательно продумывайте свои действия.

Начните действовать, опираясь на текущую статистику
Определённо, есть немало факторов, которые могут повлиять на частоту сканирований поисковым роботом Google-а.

Осознавая важность того или иного фактора, начинаешь понимать, как они влияют на рейтинг, отслеживая результаты в Инструментах для веб-мастеров.
 
Сверху Снизу