Тумбы не грабятся

toco
Posts: 62
Joined: Thu Jun 13, 2013 9:48 am

Тумбы не грабятся

Post by toco »

Висят в спонсорах в To grab и в Import и ничего не происходит.

Current build: 201809271019

из ошибок только:
Quick scj folder check returns following warnings:
Permissions on data/traders_urls.conf is 0644, 0666 is recommended
admin
Site Admin
Posts: 37994
Joined: Wed Sep 10, 2008 11:43 am

Re: Тумбы не грабятся

Post by admin »

что в логах граббера?
Don't forget to run script update
toco
Posts: 62
Joined: Thu Jun 13, 2013 9:48 am

Re: Тумбы не грабятся

Post by toco »

gallery_grabber.log
тут по нолям

или где посмотреть?
admin
Site Admin
Posts: 37994
Joined: Wed Sep 10, 2008 11:43 am

Re: Тумбы не грабятся

Post by admin »

запустите а шеле руками строку крона ротации

потом там же php gallery_grabber.php

возможно оно пишет какие то ошибки там?
Don't forget to run script update
toco
Posts: 62
Joined: Thu Jun 13, 2013 9:48 am

Re: Тумбы не грабятся

Post by toco »

вообщем дело оказалось в том, что pornhub блочит айпи при грабинге тумб через смарт
admin
Site Admin
Posts: 37994
Joined: Wed Sep 10, 2008 11:43 am

Re: Тумбы не грабятся

Post by admin »

=)
те они специально определяют как-то что это смарт и специально не дают смарту качать тумбы что б сайты им не гнали траф и они недополучали профит с этого трафа, я верно понимаю ситуацию?
Don't forget to run script update
toco
Posts: 62
Joined: Thu Jun 13, 2013 9:48 am

Re: Тумбы не грабятся

Post by toco »

Я написал "смарт", потому что моя проблема была связанна с ним, а не потому что хаб специально блочит смарт,
и люди могли понимать, почему у них смарт не грабит тумбы хаба.
Естественно дело не в смарте, а в хабе, который теперь блочит айпи при грабинге тумб не только через смарт.
Но это и ежу понятно, но тебе почему то все время нравится язвить и пытаться выставить собеседника дураком.
Выглядит как защита.
Зачем ты воспринимаешь все так близко к сердцу?
Мир не совершенен, люди не совершенны, как и твой скрипт.
Deal with it.
admin
Site Admin
Posts: 37994
Joined: Wed Sep 10, 2008 11:43 am

Re: Тумбы не грабятся

Post by admin »

То что понятно вам и ежу в большинстве случаев непонятно всем остальным.
когда гугл начал выносить из индекса дупликаты сайтов он явно писал "сайт удален потому что полный дуп контента"
но 90% упрямо думало что надо просто сменить скрипт и сразу все заработает, а с контентом ничего делать не надо и в целом думать не обязательно

поэтому дабы сделать мир немного совершенее почему бы не начать с себя и например сразу писать "оказалось что хаб забанил ИП моего сервака" ? те просто именно так как обстоит дело, а не так как будто виноват скрипт?

ну и если пойти немного дальше то почему бы не реагировать "да, я некорректно описал, дело обстоит вот так то" вместо того что б писать "сам дурак" ? на форуме куча сообщений где я пишу "да, мой баг, поправлено" если уж на то пошло, мне как раз не проблема признать свою ошибку где-то.

а если еще немного дальше пойти то почему-то не потратить это сообщение на исследование проблемы почему именно хаб банит ИП и что с этим делать?
Don't forget to run script update
toco
Posts: 62
Joined: Thu Jun 13, 2013 9:48 am

Re: Тумбы не грабятся

Post by toco »

Какие тут могут быть варианты кроме прокси?
Мы уже попробовали два разных айпи - результат одинаковый.
admin
Site Admin
Posts: 37994
Joined: Wed Sep 10, 2008 11:43 am

Re: Тумбы не грабятся

Post by admin »

например написать на хаб и спросить в чем дело?
где именно попробовали 2 ИП ?
и в чем пробелма с проксей?
Don't forget to run script update
Post Reply