Не так давно был размещен пост про накрутку поведенческих факторов, как работает механизм и главное — как «топят» честные сайты в выдаче. В комментариях было много откликов об отрицательном влиянии этого процесса на сайты, о том, как падает посещаемость после нашествия ботов. Удивило, что даже опытные СЕОшники дают вредные советы по борьбе с ботами. Сейчас я расскажу и покажу, как мы это сделали.
4319 просмотров
Начало: резкий скачок посещаемости в декабре 2020
Мы не занимаемся SEO продвижением для клиентов, ведем только свои проекты. Началось все с роста посещаемости одного из главных сайтов, потом перенеслось на все посещаемые — пример, в первые несколько дней смотрели и радовались популярности. Присмотревшись, поняли, что посещаемость выросла у страниц, семантика которых не может дать рост с 6 посещений до 200 в день:
На скрине показан участок, когда трафик вырос на 20% в день из-за ботов
Вот так выросла посещаемость несколько мертвых до этого статей:
Основной трафик этих статей был с таких источников:
1. Смартфоны и планшеты — 90 %. Среднее время просмотра страницы — 29 секунд, глубина просмотра — 1,09;
2. ПК — 10 %. Время просмотров — 2,1, глубина просмотра — 1,9
Сразу стало понятно, кто-то крутит нам посещаемость. Не самое приятное чувство узнать, что придется опять защищать ресурсы от атак (а такое случается раз в полгода, из-за конкурентности ниш и стоимости кликов в директе на аналогичные запросы по 500 р.).
Как определили ботов:
Всего несколько характеристик:
1. Малое время пребывания на сайте, но больше 15 секунд, чтобы быть зафиксированным метрикой Яндекса;
2. Действия в Вебвизоре Яндекс.Метрики — подергивание курсора, просмотр 1 и 2 экрана сайта;
3. Прямые заходы на сайт, переход из соц. сетей;
4. Большая часть посетителей — пользователи смартфонов и планшетов.
Падение позиций и трафика
Через две недели, после того, как мы заметили наплыв ботов, началось резкое падение позиций и трафика в поиске Яндекс. Google не изменился, но и давал всегда 15-20 % от общего трафика посещений.
Что пробовали делать
В выдаче можно найти много статей по аналогичным проблемам — накрутка ботами, падение трафика, ухудшение поведенческих факторов.
Очень много дают советов, мы почти все перепробовали. Вот несколько самых популярных:
1. Ограничение по IP или подсети
Боты постоянно меняют прокси, используют разные подсети, сотовые операторы, и прочее. Когда мы включили фильтры по всем ботам, отрезало половину хорошего трафика.
Действие больше вредит, чем приносит пользы.
2. Установка Антиботов
Попробовали все возможные антиботы, плагины антиботов, сервисы — русскоязычные, англоязычные.
Все они не дают никакого результата. Ну как никакого — настройки одного антибота выкрутили на максимум, из-за чего Капча показывалась каждому вошедшему на сайт, что привело к еще большему падению поведенческих факторов.
Мы отказались от этих инструментов, потому что ни один сервис антибота не может нормально определять ботов. Если это не способен Яндекс с его миллиардами, то антиботы показали вообще нулевую эффективность.
3. Переклейка домена на другой адрес
Вообще без комментариев, такой бред делать с трастовым доменом с многолетней историей, кучей естественных ссылок — рука не поднимется.
4. Лить своих ботов на сайт
Черное SEO, как и серое, путь в никуда. Начнешь делать это и все — дальше дорога будет через бесконечные костыли, пока не улетишь в бан. С дорогими проектами такое делать нельзя, ведь каждый сайт — это инвестиции, которые нужно защищать, а не топить.
5. Писать Платонам.
Самое бесполезное, что можно сделать в текущей ситуации. Мы тоже написали, вреда не принесло и ладно.
Настройка Cloudflare
Изначально было понятно, что нужно тестить Cloudflare, смотреть разные настройки, усиливать Firewall. Это не реклама, а единственный инструмент, который у нас сработал.
Но так как мы никогда не работали с Cloudflare, сначала пытались найти специалиста, который сможет помочь. Я написал, наверное, половине Fl, спрашивая про нужные мне настройки на сервисе и результат, к которому хотелось бы прийти. Ответов по теме — 0, если не считать людей, которые хотели попробовать что-то там сделать за 500 баксов, но без гарантии результата.
В итоге, методом «тыка» и тестированием разных гипотез, мы выработали простой алгоритм, который сможет повторить любой на бесплатном тарифе Cloudflare.
Основная гипотеза строилась на ограничении доступа мобильных ботов.
Что нужно делать:
— Заводим аккаунт, регистрируемся, выбираем бесплатный начальный тариф, переводим DNS на Cloudflare ;
— В Firewall делаем сследующие настройки:
Суть в чем: при входе с Android и Iphone пользователю выходит капча, которая фильтрует ботов. Боты ее не могу обойти, она двух-шаговая и в целом — сложная.
Дополнительно:
Здесь мы пускаем полезных ботов Яндекса и Google без капчи. Они ее тоже не могут обойти. Даже если это Fake Bot, все равно пускаем, нам не так опасны они, как блок полезных ботов.
Почему мы решили выдать капчу всем пользователям мобильных устройств?
Все дело в том, что у нас контентный проект, и на нем нет прямых мобильных пользователей, а для перехода с Яндекса работают Турбо страницы, с Google — AMP страницы. Мы изначально не боялись ограничивать пользователей, так как большинство приходили именно на эти элементы, а борьба была направлена на прямой трафик.
Результат настроек
Все боты проходят через Clouflare, хороших пользователей при этом не больше 2-3%.
Позиции вернулись. Трафик вырос на 10 % к докризисному уровню. Сейчас почти все боты фильтруются CLoudFlare.
Количество этих ботов не уменьшается, что говорит о целенаправленной работе, которую и не думают останавливать.
При трафике 5000-6000 тысяч в день фильтруется:
1700 ботов — примерно столько фильтруется в день в посещаемости 5000-6000
Может показаться, что мы фильтруем еще и хороших пользователей, которым лень заполнять капчу. Статистика по решенной капче в день:
В итоге только 26 решенных капч на Android и 17 на Iphone. Ничтожно мало, чтобы переживать о падении поведенческих факторов из-за этого инструмента.
Вывод
Ставьте себе Firewall, делайте правильные настройки и блокируйте вредный трафик. Даже для проекта, где супер поведенческие факторы и только естественное продвижение, нужно вовремя реагировать на проблемы и действия со стороны, не говоря уже про постоянное улучшение и оптимизацию своей работы.
Мы надеемся, что наш опыт будет полезен для всех web-мастеров, кто столкнулся с проблемой нашествия ботов и негативными последствиями такого вредительства. Инструмент реально работает! — проверено на личном опыте.
VIPIP.ru — это сервис, в котором можно заработать, просматривая сайты или читая рекламные рассылки рекламодателей. Комиссия при выводе минимальна, деньги выводяться быстро. Выплаты производятся в долларах либо в рублях: WebMoney WMZ, WebMoney WMR, QIWI, Яндекс Деньги, пластиковую карту или на сотовый телефон. Выплаты осуществляются через обменный пункт WMer.ru
Для увеличения ваших доходов в VIPIP.ru реализована удобная и выгодная партнерская программа, вы можете привлекать в проект новых пользователей и рекламодателей и получать тем самым гарантированную и стабильную прибыль.
Вы будете получать от 10% до 15% от заработка реферала.
От затрат ваших рефералов на рекламу вы будете получать 10%
Для безопасного серфинга пользователей, все сайты в серфинге и в заданиях проверяются на наличие вирусов. Сайты с вирусами в серфинг не допускаются.
Минимальная сумма для выплаты — 10 центов. Набирается быстро.
VIPIP.ru — также позволяет рекламодателю значительно поднять посещаемость своего web-сайта, поднимая его в рейтингах.
Зарегистрироваться на https://vipip. ru/?refid=634627
SEO sprint – это сервис, в котором можно заработать, просматривая сайты, читая рекламные рассылки, выполняя задания, проходя тесты. Рекламодателям позволяет размещать различные виды рекламы своих веб-ресурсов, создавать задания и тесты. Каждый пользователь может быть так же рекламодателем.
Для партнёров на проекте присутствует двухуровневая система рефералов.
Биржа рефералов с возможностью покупки и продажи.
Минимальная выплата 2 рубля.
Комиссия на выплаты отсутствует.
SEOsprint.net работает с платёжными системами Payeer, Payza, Яндекс Деньги, Perfect Money, Webmoney WMR.
Зарегистрироваться на http://www.seosprint.net/?ref=10373202
Profitcentr.com отличный и пожалуй, лучший сервис, в котором можно заработать, просматривая сайты, читая письма, проходя тесты, просматривая видеоролики youtube, получай вознаграждения за такие несложные задания как регистрация на различных сайтах, за прохождение капч, за подписки, лайки итд.
Рекламодателям позволяет размещать различные виды рекламы своих веб-ресурсов, создавать задания и тесты. Каждый пользователь может быть так же рекламодателем.
Двухуровневая рефсистема: 1 уровень до 60%, второй уровень до 10%.
Выплата заработанных денежных средств производится через Webmoney, Яндекс Деньги, Payeer, Qiwi. Ограничений для минимальной выплаты нет.
Хороший заработок в интернете без вложений лучше начать с этого сервиса. Если вы ищите заработок в сети — не раздумывайте, регистрируйтесь — не пожалеете. Регистрация на проекте простая и займёт у вас всего пару минут времени.
Зарегистрироваться на https://profitcentr.com/register?r=gribiki
wmmail.ru старейший и, пожалуй, лучший почтовик. Пять уровней рефералов 10%-5%-2%-1%-1% Один рефуровень от рекламы 5% Много писем и заданий. Минимальная выплата 10 центов. Этот проект, то что надо для построения надёжного бизнеса в интернете. Увеличить свои доходы здесь можно покупая или продавая рефералов на бирже рефералов. К тому же есть простенькие игры на деньги.
Зарегистрироваться на http://www.wmmail.ru/index.php?cf=reg-newr&ref=Gribiki
SOCPUBLIC.COM отличный сайт для заработка,на котором существует одна из самых выгодных реферальных программ. Три уровня рефералов 60%-10%-2% и один реф. уровень от рекламы 5%. На данном буксе имеется возможность заработать на просмотре рекламы на сайтах рекламодателей, чтении писем, выполнении ручного
и автоматического сёрфинга, также доступны для выполнения сотни различных
заданий. На сайте есть раздел «Достижения», где после выполнения определённого количества действий выплачивается вознаграждение. Имеется биржа рефералов с возможностью покупки и продажи. Для вывода средств вы сможете использовать следующие платежные системы: WebMoney, Qiwi, Payeer, Яндекс Деньги.
Зарегистрироваться на https://socpublic.com/?i=2616451&slide=1
Seo-Fast.ru один из лучших и надёжных буксов, на котором можно заработать, просматривая сайты, читая рекламные рассылки, выполняя задания, проходя тесты, просматривая видеоролики youtube, за подписки, лайки, просматривая тизерную рекламу. Рекламодателям позволяет размещать различные виды рекламы своих веб-ресурсов, создавать задания и тесты. Каждый пользователь может быть так же рекламодателем. На проекте присутствует двух уровневая система рефералов. Биржа рефералов с возможностью покупки и продажи.
Вывод средств осуществляется через Вебмани, Яндекс Деньги, QiWi, Perfect Money, Payeer. Минимальная выплата 3 рубля.
Зарегистрироваться на https://seo-fast.ru/?r=1445001
sharkpromotion.net отличный букс. На сервисе много работы, заработать можно просматривая сайты, читая рекламные рассылки, выполняя задания, проходя тесты, имеется авто-сёрфинг сайтов. Рекламодателям позволяет размещать различные виды рекламы своих веб-ресурсов, создавать задания и тесты. Каждый пользователь может быть так же и рекламодателем. На проекте присутствует трёх уровневая система рефералов. Биржа рефералов с возможностью покупки и продажи. Работает с платёжными системами Payeer, Яндекс Деньги, Perfect Money, Qiwi, Webmoney. Минимальная выплата 1 рубль.
Зарегистрироваться на https://sharkpromotion.net/?r=109381
WMRFast.com быстро развивающийся букс. Много кликов и заданий для заработка. На сайте есть возможность создавать короткие ссылки. Рекламодателям позволяет размещать различные виды рекламы своих веб-ресурсов, создавать задания и тесты. Каждый пользователь может быть так же и рекламодателем. На проекте присутствует трёх уровневая система рефералов. Биржа рефералов с возможностью покупки и продажи. Минимальная выплата 1 рубль. Работает с платёжными системами Payeer, Яндекс Деньги, Perfect Money, Qiwi, Webmoney.
Зарегистрироваться на http://wmrfast.com/?r=559753
Вкладка КЛИКС здесь находится обычный букс
taxi-money.info Популярный инвестиционный проект, в котором помимо самой игры с выводом денег, имеются и другие способы заработка, среди которых присутствует такой интересный вариант, как заработок на кликах, выполнении заданий,
находящихся во вкладке КЛИКС.
КЛИКС – это возможность дополнительного заработка в проекте Taxi Money.
При этом каких-либо вложений с вашей стороны не потребуется. Просто выполняйте переходы на сайты, оплачиваемые задания, чтения писем и выводите заработанные
деньги любым из доступных способов. Например: чтобы вывести заработанные деньги необходимо все что заработано в разделе КЛИКС вывести сначала на пассажирский счёт, затем переходим на вкладку ГОРОД и выводим деньги уже на кошелёк. Рекламодателям позволяет размещать различные виды рекламы своих веб-ресурсов, создавать задания и тесты. Каждый пользователь может быть так же и рекламодателем. Имеется реферальная система: вы будете получать 3% от заработка рефералов и 10% от суммы их платежей (пополнение счета рекламодателя в системе КЛИКС)
Зарегистрироваться на http://www.taxi-money.info/?r=Gribiki
CatCut 5 способов заработка
Заработок на сокращении ссылок без вложений и не только…
ВИДЕО — Как заработать на своих ссылках в Catcut —
catcut это сайт позволяющий зарабатывать несколькими способами:
— на своих ссылках — на своих сайтах — на продажах — на рефералах — на партнёрстве
Самый простой способ — зарабатывать на ссылках. Берёте ссылку, допустим, своего сайта и с помощью сервиса catcut создаете короткую ссылку, затем уже эту короткую ссылку размещаете в любых социальных сетях или сайтах. Можно свою ссылку сжать, скажем, в десять раз, а после этого создать задание в каком нибудь буксе, допустим, пройти 10 капч. Пользователь проходя задания решает капчу, просматривает 15 секунд рекламу и так 10 раз переходя по всем укороченным ссылкам, пока не попадёт на Ваш сайт. В ответ задания указывает, допустим, название Вашего сайта. За каждый переход по Вашей сжатой ссылке на сервисе catcut Вам сразу будет поступать оплата.
Когда будете создавать укороченные ссылки, не забудьте понажимать
на красные кнопки, чтобы они поменяли цвет на зелёный, иначе за переходы по Вашим ссылкам не будет идти оплата.
Выплаты осуществляются моментально на
WebMoney, карты VISA, Master Card, Яндекс Деньги, мобильный телефон.
Зарегистрироваться на http://catcut.net/ref.php?id=260863
ЗАРАБОТОК В ИНТЕРНЕТЕ
У вас есть разрешение на редактирование этой статьи.
Редактировать
Поиск по сайту
Доставщик еды выходит из обменного пункта с экраном, показывающим курсы обмена доллара США и евро на российские рубли в Москве, Россия, четверг, 24 февраля.
Доставщик еды выходит из обменного пункта с экраном, показывающим курсы обмена долларов США и евро на российские рубли в Москве, Россия, четверг, 24 февраля.
Стоимость российского рубля упала ниже 1 цента после того, как Соединенные Штаты и другие западные страны применили жесткие санкции против российской экономики.
Рубль упал почти на 10% по отношению к доллару США во вторник до 115,68 за доллар. В понедельник, после выходных, наполненных болезненными новыми санкциями, российская валюта продемонстрировала еще более резкое падение примерно на 30%. В конце пятницы курс рубля составлял около 84 долларов за доллар, прежде чем вступили в силу самые суровые финансовые санкции9.0003
Будьте в курсе последних новостей из Нэшвилла с нашей бесплатной еженедельной электронной рассылкой новостей!
Advertisement
Падение курса рубля и контроль за капиталом, введенный Москвой после ее вторжения в Украину, породили черный рынок долларов США и евро, поскольку россияне стремятся защитить свои сбережения, согласно сообщениям.
В приложении для обмена сообщениями Telegram появилось несколько чатов, в которых люди в России договариваются о встречах на улицах и в других местах, чтобы купить или продать валюту, согласно недавнему сообщению независимого российского СМИ «Медиазона».
Более 2000 человек участвовали в чатах в Москве, Санкт-Петербурге и южной части Кубани, самый крупный из которых базировался в столице России. Mediazone обнаружила, что многие участники устраивали встречи на вокзалах или указывали регионы, где могли совершаться сделки.
Сделки часто отличаются от официальных обменных курсов, поскольку контроль за движением капитала направлен на ограничение падения рубля.
«Продам $2 тыс. по 132 рубля. Северо-Запад Москвы, быстрый обмен», — говорилось в одном сообщении. «Продам 200 по 130 долларов Санкт-Петербургского метро Озерки», — гласил другой. «Продам 200 евро по биржевой цене. ВДНХ», — говорилось в одном из сообщений, имея в виду московский ВДНХ, где есть станция метро.
Реклама
В первые две недели марта появилось множество интернет-каналов, групп и ботов по обмену валюты, заполненных запросами на «обмен валюты» и предложениями «купить доллары», сообщает российская финансовая ежедневная газета «Коммерсантъ».
Некоторые каналы заявили, что у них есть актуальная информация о «возможных местах, где можно купить доллар». На одном из таких каналов афиша предлагала встретиться с обменником возле Макдональдса, чтобы купить доллары по 150 рублей.
В правоохранительных органах Ъ сообщили, что организация обмена валюты в соцсетях и приложениях для обмена сообщениями может подпадать под действие законов о «незаконной банковской деятельности», а уголовная ответственность может быть рассчитана на срок до семи лет лишения свободы.
Об авторе