Если кратко, то почему может теряться весомая часть трафика между тьюбами? Один отправил X, а второй получил от него 2/3Х или вообще, половину?
Если подробнее:
Трейжу сам с собой на своей сетке. Т.е. вижу всю статистику. Все расположено на двух серверах, так что по гео_ip могут быть какие-то погрешности.
Озаботился вопросом анализа забаненности своих тьюбов в разных странах. Для этого решил тупо сравнивать всех трейдеров попарно в разрезе интересующих стран. Использовал такую логику: если domen1 отправил domen2 X хитов Индии, а domen2 получил от domen1 сильно меньше, то, скорее всего, domen2 в Инднии забанен.
Так как Смарт хранит статсы только за сутки, то несколько дней копил данные, собирая их скриптом.
Ины от трейдера получал так
SELECT sum(`num`) as total_in FROM `ips` WHERE `trader`='domain2.com' AND `country`='IN'
Ауты на него
SELECT sum(`num`) as total_out FROM `out_ips2trader` WHERE `trader`='domain2.com' AND `country`='IN'
И так для всех возможных пар трейдеров среди всех тьюбов. Помимо «подозрительных стран» заодно взял несколько «нормальных», где банов быть не должно. И вот они-то и показали, что теряется часть трафика.
Порядок цифр всегда примерно совпадает, но доходит стабильно две-трети, половина. Ясно что погрешности, боты, прокси и т.д. Но не в таких же объемах
Вот для примера текущие цифры, хорошо отражающие проблему:
domain1.com
domain2.com IN in 34 out 35
domain2.com US in 20 out 12
domain2.com
domain1.com IN in 17 out 66
domain1.com US in 7 out 34
Куда копать, чтобы понять причину?
Теряется много трафика между тьюбами
Re: Теряется много трафика между тьюбами
Упростим для начала до "с домен1 идет на домен2 и доходит не все"
мне в голову приходит 2 вариант
1. траф дошел но не засчитался по каким-то причина скриптом (можно проверить https://smartcj.com/wiki/doku.php?id=ru:troubleshooting)
2. траф не дошел тк домен забанен в стране - можно проверить проксями\впн\сервисами которые умеют проверять баны
3. не дошел тк это был бот траф (можно попробовать сравнить какие ИП дошли а какие нет и копать куда-то начиная отсюда)
пока только это с ходу пришло в голову
мне в голову приходит 2 вариант
1. траф дошел но не засчитался по каким-то причина скриптом (можно проверить https://smartcj.com/wiki/doku.php?id=ru:troubleshooting)
2. траф не дошел тк домен забанен в стране - можно проверить проксями\впн\сервисами которые умеют проверять баны
3. не дошел тк это был бот траф (можно попробовать сравнить какие ИП дошли а какие нет и копать куда-то начиная отсюда)
пока только это с ходу пришло в голову
Don't forget to run script update