Увеличить скорость сайта антиботом.
Многие владельцы сайтов, интернет магазинов ищут ответ на извечный вопрос как увеличить скорость загрузки сайта?
Сети интернет есть множество статей на эту тему.
Все эти статьи сводятся к вот таким решениям проблемы:
- Владельца сайтов и интернет магазинов предлагается улучшить внутреннюю оптимизацию сайта;
- Оптимизировать работу веб сервера (VPS/VDS);
- Перейти на другой тариф с большими лимитами для виртуального хостинга;
- Перенести сайт к другому хостинг провайдеру.
Но мы сегодня затронем тему не менее актуальную и злободневную - защита сайта от ботов и спама.
Как показывает тенденция последних лет, трафик ботов на сайты стал увеличиваться и замедлять их работу. Иногда такое замедление переходит к "падению" сайтов, превышению лимитов хостинг провайдера и падению MySQL.
Откуда берутся боты на сайте?
Ботов можно поделить на три группы;
- Хорошие боты;
- Бесполезные боты;
- Плохие боты.
Теперь в кратко о каждой группе ботов, которые ежедневно приходят к вам на сайт и создают дополнительную нагрузку (величину нагрузки мы покажем ниже) на него.
Хорошие боты
К хороши ботам можно отнести, поисковых роботов Яндекс, Гугла и других крупных поисковых систем. Эти боты считывают информацию с вашего сайта. Таким образом поисковые системы знают о изменения на вашем ресурсе и показывают ваш сайт в выдаче.
И любой сеошник будет только рад, если узнает что быстробот поисковой системы поселился на сайте и часто туда заходит. Благодаря этим ботам, владельцы сайтов получают органически трафик и клиентов из поисковых систем.
Бесполезные боты
К бесполезным ботам можно отнести разнообразнейшие сервисы в сети интернет, начинаю от онлайн сервисов проверяющих скорость работы сайта, СЕО оптимизацию сайта и заканчивая сервисами проверяющими уникальность текста который вы пишите либо покупает на биржах.
Представьте, только что только на биржу text.ru приходит ежедневно 73000 копирайтеров, заказчиков и посетителей которые проверяют уникальность текстов.
На картинке ниже, посещаемость биржи:
Для проверки текстов, все сервисы используют своих ботов. Эти боты проходят по сайтам и кэшу поисковых систем, для проверки уникальности текста.
Добавим сюда www.etxt.ru с 26000 посетителей
И еще 66000 посетителей advego.com.
Это только 3 самых крупных биржи, с которых идет ежедневный поток ботов на ваш сайт.
Плохие боты
И теперь о самом нежелательном явлении, о плохих ботах.
Не будем разделять ботов, на плохих и очень плохих. Мы лишь поясним что это за явление.
К плохим ботам относятся парсеры, грабберы, скрипты клонирования, спам боты.
Для справки:
Парсер - это программа, сервис или скрипт, который собирает данные с указанных веб-ресурсов, анализирует их и выдает в нужном формате.
Грабберы - это программа, которая собирает контент с других сайтов (интернет магазинов) и переносит на другой сайт в автоматическом режиме.
Клоны сайтов - это скрипт который создает динамическую копию вашего сайта, с некоторыми изменениями. Меняют реквизиты, логотип, почту в форме обратной связи.
Спам боты - на этой группе стоит остановится подробнее. Спам боты, это некие сервисы которые создавались для блага, а могут использоваться во вред. Как правило это сервисы по накрутке посещаемости и поведенческих факторов на сайте.
Это один черных СЕО способов по накрутке поведенческих факторов на сайте.
И если плавное увеличение посещаемости с запросами соответствующими тематике сайта это хорошо, то резкий подъем посещаемости с запросами не соответствующими тематике, приводит лишь к фильтрам поисковых систем и понижению сайта в выдаче.
Кто и зачем может наслать на ваш сайт спам ботов с порно запросами, мы рассматривали в одной из наших статей.
Увеличить скорость сайта путем уменьшения бот трафика
Для того, чтобы увеличить скорость загрузки сайта, мы используем скрипт (плагин) Антибот. Подробнее с данным продуктом можно ознакомится на сайте https://antibot.cloud
Для наглядности мы приведем пример статистики одного из наших клиентов, использующего Антибот. Посещаемость его сайта 650-800+ посетителей в сутки из поисковых систем.
На картинке ниже вы увидите две колонке "Не прошли" и "Автоматически".
Не прошли - боты, которые были остановлены на заглушке Антибота и не попали на сайт.
Автоматически - это посетители, которые беспрепятственно попали на сайт.
Как видно из статистики, 40-50% посетителей на сайте, это боты!
Это ситуация когда у владельца сайта нет недругов, конкурентов и завистников.
Теперь второй пример, когда на молодой сайт с посещаемостью 15 уников в сутки, наслали спам ботов с порно запросами, одновременно пытаясь загнать сайт под фильтр и помешать стабильной работе ресурса, большой нагрузкой.
Статистика антибота на иллюстрации ниже. Обратите внимание на цифру в 12038 спам ботов которые были остановлены.
И основная часть этих спам ботов - 10000, пришла на сайт с 00-00 до 9-00.
А теперь, обратите внимание на пиковую загрузку виртуального хостинга beget.com.
Нагрузка составила чуть больше 5% от лимита хостинга.
Подсчет сделанный на основе данного статистического опыта показал, что виртуальных хостинг способен выдержать 5-6000 посетителей в сутки. После чего сайт начнет очень медленно работать, а хостинг провайдер предложит сменить тарифный план, либо переехать на VPS/VDS.
А нагрузка в 10000 спам ботов за 9 часов, должна была "уложить" сайт на неизвестный промежуток времени.
Если у Вас возникли проблемы со скоростью загрузки сайта и вы пожелаете избавиться от бот нагрузки, пишите через форму обратной связи и мы установим и настроим Антибот на вашем сайте, либо интернет магазине.
