Страница 1 из 1

Устранение посещений сайтов с несуществующих User-Agent

Добавлено: 08 авг 2014, 22:00
JetSwap
Некоторое время назад мы стали получать обращения от рекламодателей о посещении сайтов с несуществующих User-Agent'ов. Мы провели детальную проверку и обнаружили, что у 34 пользователей системы поведение программы SafeSurf в части формирования User-Agent отличается от нормального.

Эти пользователи получили свои заслуженные "бонусы", а все IP-адреса, для которых наблюдалась аномальная активность - долгую блокировку в черном списке.
Кроме того, добавлено автоматическое дополнение черного списка IP-адресами, для которых будет наблюдаться аномальная активность снова. В результате количество посещений тестовой страницы с User-Agent, которые можно отнести к подозрительным, снизилось с 15% до 1.5% и продолжает снижаться в результате работы автоматических фильтров. Уже в черный список попало около 5500 IP-адресов.

Возникший в процессе решения этой проблемы черный список IP-адресов будет использоваться и в других системах улучшения качества трафика. В частности, в скором времени мы введем автоматическую блокировку IP-адресов, а также IP-подсетей, для которых будет зафиксировано низкое качество трафика. При этом на первом этапе будут блокироваться только IP-адреса, никаких штрафов посетителям за это не будет.

:arrow: Разбор конкретных случаев выписки штрафов

:idea: Обновление от 9 августа: дополнительная проверка показала всего 3 посещения из 25000 (0.01%) с некорретным User-Agent.
Можно считать, что проблема устранена.

Re: Устранение посещений сайтов с несуществующих User-Agent

Добавлено: 08 авг 2014, 22:22
neiroscop
Надеюсь, что разбор будет быстрым, честным и справедливым...

Re: Устранение посещений сайтов с несуществующих User-Agent

Добавлено: 09 авг 2014, 01:25
zl0y
хорошая новость
neiroscop писал(а):
Надеюсь, что разбор будет быстрым, честным и справедливым...
аналогично

Re: Устранение посещений сайтов с несуществующих User-Agent

Добавлено: 09 авг 2014, 18:11
online777v
Отличная новость))

Re: Устранение посещений сайтов с несуществующих User-Agent

Добавлено: 10 авг 2014, 17:59
PapaDimas
Новость хорошая. В связи с этим у меня вопрос.
С 09.08 при прочих равных параметрах упал трафик по уникам на 25% и до сегодня так и не восстановился.
Что можно предпринять по этому поводу.

Re: Устранение посещений сайтов с несуществующих User-Agent

Добавлено: 10 авг 2014, 19:15
loller5
PapaDimas писал(а):Новость хорошая. В связи с этим у меня вопрос.
С 09.08 при прочих равных параметрах упал трафик по уникам на 25% и до сегодня так и не восстановился.
Что можно предпринять по этому поводу.
Настройки гео, скрытый режим.

Re: Устранение посещений сайтов с несуществующих User-Agent

Добавлено: 11 авг 2014, 21:44
amadeustomsk
JetSwap писал(а):Мы провели детальную проверку и обнаружили, что у 34 пользователей системы поведение программы SafeSurf в части формирования User-Agent отличается от нормального.
Эти пользователи получили свои заслуженные "бонусы", а все IP-адреса, для которых наблюдалась аномальная активность - долгую блокировку в черном списке.
Сразу увеличилось кол-во сайтов просмотренных за день! Изображение

Re: Устранение посещений сайтов с несуществующих User-Agent

Добавлено: 14 авг 2014, 02:47
club777
Приятно удивлен, :ugeek:
не прошло и 3-х лет, как вы предприняли робкие попытки анализа работы СС на стороне серферов. Свершилось!
Очень надеюсь, что администрация на этом не остановится и выведет качество трафа на приемлимый уровень!!!
Глядишь, и реклы снова подтянутся... :roll: