Использование этого блокиратора избавит Ваши сайты от 90% спам-ботов в сети, от нагрузок, от бесполезных пауков и сканеров, от потенциальных угроз и попыток взлома.
Блокировка ботов посредством файла .htaccess
Использование конфигурационного файла web-сервера Apache и некоторых других, подобных ему серверов — .htaccess (hypertext access) — наиболее простой и универсальный способ борьбы с спам-ботами. Этот файл есть в корне Вашего сайта на сервере (если нет, создайте его) и вставьте в него следующий «универсальный блокировщик спам-ботов * «:
Кто такие «спам-боты» и зачем их блокировать?
Под термином «спам-бот» я подразумеваю роботов, сканирующих сайт пользователя в целях сбора конфиденциальной информации, собирающие статистику (семантику, ключи, наличие используемых технологий, плагинов и т.д.). К спам-ботам также можно отнести никому не известные поисковые системы или каталоги сайтов.
К бесполезным спам-ботам также можно отнести специализированное ПО, которое может использоваться хакерами или онлайн сервисами для поиска уязвимостей на Вашем сайте.
Как сделать СПАМ БОТА 5 строками python
Рано или поздно встает вопрос о их блокировке, поскольку имеется рад негативных последствий для сайта:
- Нагрузка на сервер. Боты в большом количестве способны создать колоссальную нагрузку на сайт. Учитывая тот факт, что бесполезных ботов очень много, их пристальное внимание к вашему сайту негативно отобразится как на скорости загрузки, так и доступности самого сайта.
- Сбор конфиденциальной информации. Как пример, спам-боты собирают информацию об установленных на вашем сайте плагинах, ваш сайт попадает в списки потенциально уязвимых сайтов (при обнаружении уязвимостей в каком-то плагине) и Ваш сайт в числе первых в списке на взлом.
- Воровство контента. Различные онлайн-сервисы собирают информацию с Вашего сайта, такие как семантику, тематику, трафиковые страницы и популярные тексты. Эту информацию впоследствии можно встретить в открытом доступе. И ею беспрепятственно пользуются копипастеры, клонировщики сайтов и дорвейщики.
- Умышленный вред. Ваши конкуренты могут использовать спам-ботов целенаправленно: скликивать рекламу на сайте, инициировать регистрации пользователей, спамить в формы связи, осуществлять DDOS атаку и т.д.
Это еще не все негативные последствия, в связи с чем возникает резонный вопрос: а зачем пускать таких спам-ботов на сайт?
Как работает «блокировщик спам ботов»?
Как правило, программное обеспечение (при обращении к сайту) должно передать идентификационную информацию о себе (представится). Такая информация передается в User-Agent. По User-Agent мы видим, кто заходит на сайт, и если он в нашем черном списке (см. выше), то сервер блокирует для него доступ, а именно, вернет ответ:
HTTP/1.1 403 Forbidden
* Почему блокиратор универсальный?
Название «универсальный» — условное. Нельзя охватить весь богатый перечень всех бесполезных ботов и пауков. Тем более, блокировка того или иного бота — вопрос риторический. Например, Baiduspider — бот крупнейшего китайского поисковика, одного из лидеров поисковых запросов в мире. но нуждается ли в нем рядовой русскоязычный сайт? Я считаю, что нет, поэтому он заслуженно в черных списках данного «универсального блокиратора» (для Рунета).
В мой универсальный блокиратор входит около 200 бесполезных ботов, пауков и сканеров (в реальности, этот список будет на порядок выше, так как блокируются и вариации основных ботов). Этот список составлялся и корректировался (дополняется периодически — заходите на эту страницу за обновлениями) на протяжении нескольких лет практической работы с сайтами клиентов, которых приходилось лечить от вирусов, защищать от DDOS атак, попыток взлома и т.д. Этот список уже стоит на тысячах сайтов в интернете и приносит свою практическую пользу вебмастерам.
Что такое спам боты – как от них защититься через плагин antispam bee, другие способы
Спам боты – это автоматизированные ресурсы, которые выполняют определённые задачи. Есть боты, приносящие пользу людям, а есть те, от которых наносится ущерб. Возникает необходимость в защите от вредных ботов разными способами.
Что такое спам боты, в чём их опасность
Здравствуйте, друзья! Продвигая ресурсы в Интернете возникает опасность в столкновении со спам ботами. Они могут нанести, например, вред в раскрутке сайта, продвижении интернет-магазинов если накручиваются спам комментарии или добавляются ложные заказы в корзину. Спам боты создают массовые рассылки от третьих лиц для получения контактов. Чтобы этого не происходило, в статье рассмотрим, что такое спам боты и какие способы защиты использовать.
Итак, спам ботом называют компьютерную программу, с помощью которой можно отправлять спам разного вида – рассылать письма по электронным адресам в виде спама или спам комментарии на сайтах, в социальных сетях. Цель у спам ботов одна – продвинуть «левые» ресурсы через чужую аудиторию.
Рассмотрим несколько примеров. Если спам рассылается на сайты в виде комментариев, то как правило, комментарии не несут в себе никакого смысла. К примеру, появляются постоянно комментарии – хочу купить, сколько стоит сервис. Если нажать на комментарий, то можно перейти на чужой сайт или открыть неизвестный ресурс. Таким образом спамеры получают трафик на свои сайты.
Что касается спама на Email – есть цель получения контактов пользователей и другой информации. Простыми словами по взломанной Email базе рассылаются письма, которые переводят пользователей на запрещённые ресурсы. После перехода по ссылкам можно перехватить вирус на компьютер или потерять конфиденциальные данные.
Примеры работ спам ботов в соц.сетях
В социальных сетях также работают спам боты – они делятся на полезные и «запрещённые». К полезным можно отнести тех ботов, которые рассылают рассылку (чат боты), помогают заказывать продукты. С их помощью пользователи получают информацию о выходе новой продукции, проведение вебинаров и т.д. Пользователь добровольно подписывается на такие рассылки, чтобы получать необходимые ресурсы.
Если говорить о запрещённых спам ботах, то пользователям могут рассылать письма без их согласия. Чаще такая рассылка происходит со взломанных страниц. К примеру, страница одного человека была взломана и он даже не подозревает о том, что с его аккаунта разносится спам друзьям.
Спам боты пишут спамные комментарии в различных группах. Они делают одинаковые сообщения и оставляют ссылки на чужие ресурсы. Перейдя по ссылке на ресурсы, можно увидеть сообщение — переход на сайт заблокирован и т.д.
Спам боты – защита плагином antispam bee
Есть много способов защиты от спам ботов, которые рассмотрим ниже в статье. Здесь поговорим о плагине antispam bee, с помощью которого защитите свой сайт.
Что это за плагин? Его называют защитой от спам ботов, которые пишут под статьями комментарии в виде спама. Плагин работает бесплатно со всеми CMS, включая WordPress. Достаточно его найти в панели управления сайта, установить и настроить необходимые параметры. Когда он будет установлен, активируется ловушка для спам ботов и они не оставят комментарии.
Установка плагина и настройка. Спам боты
Для активации плагина antispam bee перейдите в панель управления на сайте Вордпресс и нажмите раздел «Плагины», далее «Добавить новый».
В поле поиска по плагинам введите название плагина и нажмите на клавиатуре «Enter»
Необходимо нажать «Установить», чтобы плагин добавился на сайт. После установки кликните по кнопке «Активировать».
В списке плагинов найдите активированный плагин и нажмите «Настройки».
В настройках найдите параметр — «Удалять комментарии по причине спама». После чего выберите настройку «Ловушка для спам ботов» и нажмите «Сохранить изменения».
Когда функция активируется, спам боты больше не будут отправлять комментарии на ваш сайт. Рассмотрим по списку, что ещё есть в этом разделе:
- можно настроить время комментария;
- установить параметр нет данных;
- проверка страны;
- фальшивый айпи адрес;
- язык комментария…
Вы можете выбрать только одну функцию защиты в параметре «Комментарии».
Какие ещё есть способы защиты
Рассмотрим дополнительные способы защиты от спам ботов:
- Ру капча. С помощью капчи можно эффективно защитить любой ресурс в Интернете от спам ботов. Как работает? Устанавливается специальный скрипт, который не даёт боту пройти в систему ресурса. Спам боты заходят на сайт и не могут, например, оставить комментарий. Требуется разгадать символы, а это может сделать только человек. На блоге есть статья о том, что такое капча для заработка через Интернет.
- Анализ Email. Данный способ включает в себя проверку отправленного письма по содержимому, например, какая информация, об авторе, количество ссылок и т.д.
- Блокировка айпи адресов. Хостинг провайдеры помогают вычислить айпи адрес с которых идёт спам и заблокировать их. Это делается через спец.настройки сервера.
- Использование отзывов в Интернете. Если рассылка сомнительная, можете посмотреть отзывы об отправителе в Сети. Метод позволяет понять, является ли отправитель спамером или нет.
- Защита для Email рассылок от спама. Сервисы рассылок используют подобную защиту, чтобы устранить угрозу возникновения спама.
- С помощью специалистов. Эта услуга платная, но вы можете применить комплексную защиту для сайтов, интернет магазинов и других ресурсов. Заказать услугу защиты от спам ботов можно на специализированных сайтах или на фрилансе.
Отзывы о antispam bee
Для заработка через Интернет на своём сайте, важно иметь живые комментарии и живую аудиторию. Плагин АнтиСпам Би является отличным ресурсом в защите от спама.
Люди довольны его использованием — «translated.turbopages.org/proxy_u/en-ru.ru.d5418cc3-62dcea88-a85ed1e9-74722d776562/https/wordpress.org/support/plugin/antispam-bee/reviews/page/2/».
Заключение
В статье был рассмотрен вопрос, что такое спам боты, показали конкретные примеры. На практике установили плагин для защиты от спама на сайте и сделали обзор на другие способы защиты. Теперь вы защитите сайты от спам комментариев и у вас будет живая посещаемость, которая улучшит продвижение ресурсов.
Спасибо за внимание!
С уважением, Иван Кунпан.
Источник: biz-iskun.ru
Что такое спам-боты
Получи нашу книгу «Контент-маркетинг в социальных сетях: Как засесть в голову подписчиков и влюбить их в свой бренд».
Подпишись на рассылку и получи книгу в подарок!
Спам-бот — это программа, которая автоматически рассылает спам адресатам.
Больше видео на нашем канале — изучайте интернет-маркетинг с SEMANTICA
Бот для рассылки спама работает с подготовленными рекламными письмами, отправляя их по E-mail адресам, сервисам мгновенного обмена сообщениями — IM и другими службами обработки текстовой информации.
Бот для отправки спама мешает воспринимать пользователям оригинальную информацию ресурса, что уменьшает удовлетворенность его посетителей, и в итоге приводит к уменьшению их общего числа на конкретном сайте.
В качестве простого примера, позволяющего понять, что это спам-боты, можно привести любые письма, приходящие на вашу электронную почту от неизвестных лиц и организаций, которым вы не предоставляли такого разрешения. Чаще всего – это массовая рассылка, рассчитанная на большое количество адресов, и содержащая в себе различные коммерческие предложения или рекламу. Нередко в своем почтовом ящике вы можете увидеть такие заголовки как «Бизнес на дому», «Уникальное предложение», «Акция на покупку.. » и т.д. Большинство подобных сообщений как раз и относится к спамным.
Спам-боты на сайте и других сервисах
Спам-боты работают не только с электронной почтой, но и с любыми сайтами, социальными группами или сетями, а также с другими ресурсами в интернете. спам-боты на сайте, в чатах и прочих площадках ищут адреса и каналы для рассылок информации или же используют автоматический подбор адресов.
Классификация спам-ботов
Исходя из особенностей работы, подобные программы можно разделить на две категории:
- Простые – постят большое количество спамных сообщений, распространяют публикации через репосты и т.д.
- Сложные – действуют с помощью внешних приложений или Java-скриптов. Могут самостоятельно осуществлять поиск информации в сети, скрывают свое происхождение, подвергая определенному риску огромное количество IP-адресов.
Зачем нужна фильтрация и блокировка ботов
По статистике, две трети электронных писем — это спам. Они не несут в себе никакой полезной информации. И часто являются вредоносными — пользователь может поймать вирус или троян. Это выведет из строя его компьютер. Или злоумышленник украдет конфиденциальные данные — пароли от банковских карт, паспортные данные и т. д.
В разрезе сайтов и других интернет-площадок, боты увеличивают нагрузку на сервер, что снижает скорость загрузки страниц. Они искажают данные аналитики сайтов. Это минимизирует вероятность объективного анализа поведенческих метрик, подсчета реального трафика и особенностей целевой аудитории.
Как защититься от спам-ботов
Защита адреса электронной почты от спам-ботов осуществляется несколькими методиками:
- Анализирование письма с последующей классификацией. Способ решает две основные задачи: фиксирует спам и находит письма, которые к нему не относятся. Анализ проводится:
— по формальным основаниям;
— по содержимому, используя сигнатурный анализ (поиск в содержимом — сигнатур, включенных в специальную базу данных);
— по содержимому с внедрением методов статистики;
— по содержимому с внедрением SURLB (сервиса блокировки подозрительных URL) – предполагает поиск ссылок в содержимом письма, с последующим их анализом по базе SURLB. - Использование детекторов рассылки для защиты от спам-ботов – фиксация похожих писем, которые отправлены на много адресов.
- Признание отправителя спамером. Метод основывается на использовании черных списков IP- и почтовых E-mail адресов. Преимущества способа в том, что для опознания спамера, не нужно принимать и анализировать письмо. Для проверки используются собственные списки пользователя или популярные сервисы RBL и DNSBL.
- Верификация обратного адреса и домена. Простой вариант метода – использование стандартного DNS-запроса по наименованию домена отправителя сообщения. Если в ходе проверки выясняется, что такого домена не существует, то адрес отправителя считается вымышленным. Более серьезная проверка возможна с помощью технологии SPF, также предполагающая применение протокола DNS для верификации адреса отправки.
- Эмуляция несложной ошибки и пересылка на SMTP-сервер. Реальный ресурс, при фиксации такой ошибки, повторяет попытку пересылки через 1-2 часа. Боты подобную процедуру не выполняют.
Защита сайта от спам-ботов
- Применение файла .htaccess – самый жесткий вариант защиты от спам-ботов, предполагающий запрет входа на ресурс посетителям, пришедших с запрещенных адресов. Файл формируется web-мастером и располагается в основной директории сайта, блокирует все подозрительные адреса.
- Настройки фильтра Google Analytics – формирование защиты статистической информации, чтобы она не искажалась в результате влияния ботов.
- Применение возможностей СMS и второстепенных плагинов – оберегает ресурс от взлома, а контент от комментирования спамного характера. Подбор инструментов осуществляется в соответствии с ОС, на которой функционирует сервис. Данная методика предполагает использование антиспам-плагинов, капчи или ручной премодерации комментариев.
Подбор тактики защиты
При обнаружении несанкционированного доступа на сайт, прежде всего, необходимо сообщить об этом хостинг-провайдеру. Дальнейшие действия зависят от характера влияния ботов на ресурс. Ручное комментирование – спам удаляется с помощью премодерации. Очистка статистики с помощью настройки фильтров Google Analytics или файл .htaccess заблокирует все подозрительные IP-адреса.
Каждый из вариантов не является 100% эффективным, если применяется по отдельности. Надежный антиспам-фильтр должен использовать все способы, вынося решение по совокупности сбора информации о письме или посетителе сайта, используя для этого разнообразные методики анализа.
Источник: semantica.in