Всем известен спам в электронной почте, эти надоедливые, нежелательные электронные письма, которые вы получаете в свой почтовый ящик каждый день. Но электронная почта — не единственное средство массовой информации, которое страдает от спама.
Веб-сайты получают больше спама, чем вы можете себе представить. Исследования показывают, что 1/3 всего трафика веб-сайтов в мире приходится на спам-ботов.

"Bot" is actually short for robot – not the kind found in science fiction movies or on the production line in a manufacturing business.

Программное обеспечение, которое работает самостоятельно, выполняя широкий спектр автоматизированных задач. Но не все боты злые. Бот Google — пример бота, который не является злым. Он просматривает ваш сайт, чтобы проиндексировать его в поисковой системе Google. Хорошие боты имеют одну общую характеристику: они возвращают вам определенную ценность.

Есть три типа злых ботов:

  1. Боты форм: просматривают ваш веб-сайт в поисках гостевых книг, блогов, форумов и других типов веб-форм, которые затем могут использоваться для отправки поддельного контента;
  2. Боты-сканеры: просматривают ваш сайт, чтобы найти и индексировать информацию. Но в отличие от бота Google, он не возвращает вам никакой ценности. Они используют информацию исключительно в своих целях.
  3. Хакерские боты: эти боты являются одним из самых изощренных типов преступных программ, с которыми сегодня сталкивается Интернет. Они могут удалять веб-сайты из Интернета в рамках скоординированной атаки типа «отказ в обслуживании», извлекать пароли и другую информацию из вашей базы данных или даже сделать ваш сервер частью сети вредоносных ботов.

Итак, какая вам разница?

  • Статистика: посещения ботами повлияют на статистику ваших посетителей (например, в Google Analytics). Это даст вам ложную информацию и навредит вашему интернет-маркетингу;
  • Вклад посетителей: с появлением ботов форм мы начали внедрять капчи на веб-сайтах для защиты наших форм. Будем честны, их никто не любит, но это было лучшее, что мы смогли придумать;
  • Безопасность: когда ваш веб-сайт отключается из-за DDOS или когда ваши данные украдены, вы теряете доверие как к бизнесу;
  • Ресурсы сервера: каждый посетитель вашего веб-сайта использует ваш сервер, вашу базу данных, память сервера и т. д. Представьте, сколько ресурсов сервера вы потратили на спам-ботов;

Подумайте о последствиях взлома вашего сервера, о деньгах, потраченных впустую на маркетинг, основанный на ложных данных, о ненужных обновлениях сервера, которые вы сделали,…

Наше первое исследование

В прошлом году мы решили провести тест, чтобы увидеть, сможем ли мы найти разницу между посетителями-людьми, добрыми ботами и злыми ботами.
Первые два дня были шокирующими. Хотя мы не обнаружили подозрительного трафика в Google Analytics или других аналитических инструментах, мы заметили большой объем (30%) спам-трафика. Первое, что мы сделали, это погрузились в наши алгоритмы… мы сделали что-то не так? Но более внимательное изучение журналов сервера показало, что сайт подвергся атаке. Мы бы никогда этого не заметили, если бы не настроили наш инструмент.
После этих двух дней атака прекратилась, и мы заметили, что было постоянно 7% трафика от других злых ботов.

Будущее

Увидев эти результаты, мы убеждены, что нам нужно начинать битву. Вот почему мы в http://www.spamifyguard.com каждый день совершенствуем наши алгоритмы. И будем продолжать это делать, пока не победим и не остановим всех злых ботов.

Наша основная миссия — построить самообучающийся алгоритм, который сможет самостоятельно обнаруживать новых спам-ботов.