CloudFlare и SEO

Мы опубликовали новое сообщение в блоге, в котором представлены ответы на несколько часто задаваемых вопросов о SEO и Cloudflare. Вы можете просмотреть это Вот ,

В апреле 2010 года, когда мы запустили приватную бета-версию CloudFlare для ограниченного круга тестируемых пользователей, Google объявил, что они собираются начать принимая во внимание скорость сайта в своих рейтингах , Мы подумали, что CloudFlare - это не только сервис производительности и безопасности, но теперь мы также можем пообещать преимущества поисковой оптимизации (SEO)!

Наши ранние тесты показали, что, несмотря на то, что большинство сайтов работали как минимум на 30% быстрее, CloudFlare мало помогало с точки зрения рейтинга в поисковых системах. Фактически, в течение примерно 3 месяцев прошлым летом мы слышали многочисленные сообщения о том, что сайты просматривали отчеты из своих инструментов Google для веб-мастеров, в которых указывалось, что поисковый движок Google не слишком часто посещал страницы. Нехорошо.

Это не было проблемой, которую мы приняли слегка. Эти три месяца мы провели, исследуя происходящее, изучая наши технические системы, чтобы убедиться, что поисковые системы не были ограничены, а также напрямую работая с командами сканирования и ранжирования в поисковых системах. Ответ, как оказалось, был сложным.

Поисковые системы не хотят перегружать сайты, когда сканируют их. Чтобы свести к минимуму это, они группируют сайты по IP-адресу и, если они обнаруживают проблему на одном сайте, они уменьшают скорость сканирования на всех сайтах, использующих этот IP. Мы обнаружили, что то, что происходило, было то, что один сайт, стоящий за CloudFlare, имел проблемы с их происхождением, и из-за этого поисковые системы замедляли свою «скорость» сканирования (скорость, с которой сайт сканируется). Ничего из этого не стало очевидным, пока у нас не было тысяч сайтов, использующих наш сервис, и мы не смогли работать с командами сканирования, чтобы понять суть происходящего.

Мы сделали пару вещей. Во-первых, мы изобрели новую технологию, которая при обнаружении проблемы на сайте автоматически изменяет IP-адреса сайта CloudFlare, чтобы изолировать ее от других сайтов. (Думайте об этом как о карантине больного пациента.) Во-вторых, мы работали напрямую с группами сканирования в крупных поисковых системах, чтобы они знали, как работает CloudFlare. У всех поисковых систем уже были специальные правила для CDN, таких как Akamai. CloudFlare работал немного по-другому, но попал в ту же общую категорию. Благодаря сотрудничеству с этими поисковыми группами мы смогли получить диапазоны IP-адресов CloudFlare, перечисленные в специальной категории в поисковых роботов. Это не только предотвращает кластеризацию сайтов, стоящих за ними, в наименее эффективный знаменатель или неправильное геотегирование на основе IP-адреса DNS-разрешения, но также позволяет поисковым системам сканировать с максимальной скоростью, поскольку CloudFlare может обрабатывать нагрузку, не перегружая происхождение.

Результаты были впечатляющими. Как только мы решили эти проблемы, проблемы, о которых сообщалось в Инструментах Google для веб-мастеров, сразу же были устранены. Улучшена оценка скорости страницы сайта. И, хотя нет ничего более важного, чем иметь хороший релевантный контент для SEO, мы почти каждый день получаем заметки от довольных пользователей о том, что ничто иное, как добавление CloudFlare, не помогло в их поисковом рейтинге. Это круто. Кстати, хотя у нас нет никаких внутренних знаний о том, как различные поисковые системы ранжируют сайты, наши неофициальные данные свидетельствуют о том, что способность обрабатывать более высокую скорость обхода поискового запроса может быть даже более важной для ранжирования, чем более быстрое время загрузки страницы.

В итоге то, что мы считали быстрой победой, оказалось удивительно сложной задачей. Сегодня мы видим ряд сервисов, следующих по стопам CloudFlare и заявляющих, что они помогут вашему SEO только потому, что они могут сделать ваш сайт немного быстрее. Оказывается, хотя кажется, что это должно быть прямо, на самом деле это не так просто. Мы рады, что смогли решить эту проблему для наших пользователей и, в конце концов, предоставить реальные преимущества SEO. Поскольку другие поставщики облачных услуг неизбежно сталкиваются с аналогичными проблемами, мы будем рады поделиться своими знаниями, чтобы помочь им справиться и с этими сложными проблемами.

Похожие