SCJ_VISITOR -> spider

Post Reply
Include
Posts: 11
Joined: Tue May 28, 2019 10:33 am

SCJ_VISITOR -> spider

Post by Include »

Насколько надежно дефолтный массив 'Spiders UA' определяет всех пауков?

у меня сейчас так:
bot
crawl
spider
proxy
yahoo
google
SmartCJ
SCJ
yandex
Baiduspider
FTT2 Ping Bot
baiduboxapp
mediapartners
slurp
baidu

интуиция подсказывает что тот же гугл может 'хитро' заходить на сайты и массив 'Spiders UA' далеко не все отлавливает. Подскажите что допилить, где взять полный список 'Spiders UA' и диапазоны ip-адресов?
admin
Site Admin
Posts: 37233
Joined: Wed Sep 10, 2008 11:43 am

Re: SCJ_VISITOR -> spider

Post by admin »

скрипт определяет спайдеров ровно по вашим настройкам в сетингах

как в этом случае ответить на вопрос "Насколько надежно дефолтный массив 'Spiders UA' определяет всех пауков? " ...
по тому что в сетингах - на 100%

если вам надо вот прям все точно как хитро ходит гугл - это надо обратиться на гугл )
в остальных случаях каждый набивает сам что найдет, у меня никакого тейного входа на гугл нет )
Don't forget to run script update
Include
Posts: 11
Joined: Tue May 28, 2019 10:33 am

Re: SCJ_VISITOR -> spider

Post by Include »

вопрос не к обработчику а к самому массиву исходных данных - 'Spiders UA'

может кто поделится?
admin
Site Admin
Posts: 37233
Joined: Wed Sep 10, 2008 11:43 am

Re: SCJ_VISITOR -> spider

Post by admin »

я думюа на сеошных форумах могут быть списки
Don't forget to run script update
Post Reply