Page 1 of 2
вопрос по gallery checker
Posted: Mon Aug 07, 2017 12:18 am
by svenx
Привет,
а чекер проверяет все галеры всегда?
Или если я задам правила для определенных доменов и default правило не стану указывать - то будет грузить только галеры с этих доменов?
Как-то из лога непонятно (
Re: вопрос по gallery checker
Posted: Thu Aug 10, 2017 4:18 pm
by admin
Всегда проверяет все.
А надо по доменам по какой то причине ?
Re: вопрос по gallery checker
Posted: Thu Aug 10, 2017 5:26 pm
by svenx
admin wrote:Всегда проверяет все.
А надо по доменам по какой то причине ?
было бы лучше по доменам -
потому что:
по некоторым доменам можно настроить RSS итп и удалять через Sets
а по некоторым нельзя - и тогда их проверять уже чекером
Re: вопрос по gallery checker
Posted: Thu Aug 10, 2017 5:31 pm
by admin
Да, хорошая мысль, доделаем
Re: вопрос по gallery checker
Posted: Mon Aug 21, 2017 2:14 pm
by admin
Доделано в виде
domain.com|skip
значит галеры с этого домена не проверять
Re: вопрос по gallery checker
Posted: Fri Oct 06, 2017 7:41 am
by richmantrade
Скажите плиз, а чекер из любого статуса галеры чекает и в инактив отправляет (если конечно сработало правило) ?
Я замечаю в Preload , когда тумбы кроплю, много удаленных (у спонсора) галер, при этом в логе чекера:
Code: Select all
2017-10-06 10:36:12: Adding galleries from 0 Speed 0 b\s, 0 urls\min (0.00099492073059082, 0.00099802017211914)
2017-10-06 10:36 Adding galleries from 0 Speed 0 b\s, 0 urls\min (0.0088980197906494, 0.0088980197906494)
2017-10-06 10:36:12: All galleries has been checked today. Sleep till tomorrow (6780 seconds) (0.0028548240661621, 0.0018570423126221)
2017-10-06 10:36 All galleries has been checked today. Sleep till tomorrow (6780 seconds) (0.0093669891357422, 0.00046896934509277)
2017-10-06 10:37:13: Adding galleries from 0 Speed 0 b\s, 0 urls\min (0.00072813034057617, 0.00073099136352539)
2017-10-06 10:37 Adding galleries from 0 Speed 0 b\s, 0 urls\min (0.0072970390319824, 0.0072970390319824)
2017-10-06 10:37:13: All galleries has been checked today. Sleep till tomorrow (6719 seconds) (0.0024600028991699, 0.0017299652099609)
2017-10-06 10:37 All galleries has been checked today. Sleep till tomorrow (6719 seconds) (0.0077230930328369, 0.00042605400085449)
Пример удаленной галеры:
https://www.txxx.com/videos/4612261/lez ... romo=10281
Хедер у этого урла - HTTP/2.0 404 Not Found и в хтмл_е есть - <h1>Oops! Page not found</h1>
В рулезах чекера:
txxx.com|Oops! Page not found
default|http_code_404
Оговорюсь сразу - галерей в прелоаде много. Может скрипт просто не успевает все прочекать ? Как это вообще проверить/справить можно ?
V 2.1 Build 201709181031
Re: вопрос по gallery checker
Posted: Fri Oct 06, 2017 9:02 am
by admin
Проверяет только активные.
те прелоад тут никак.
Re: вопрос по gallery checker
Posted: Fri Oct 06, 2017 9:02 am
by admin
кстати как она попала в прелоад если она была недоступна ?
Re: вопрос по gallery checker
Posted: Fri Oct 06, 2017 11:28 am
by richmantrade
admin wrote:Проверяет только активные.
А в остальных статусах проверять - сложно сделать ? И сейчас я объясню для чего мне это нужно.
admin wrote:кстати как она попала в прелоад если она была недоступна ?
Так она когда грабилась - была рабочая. Оно ж как происходит: туб спи%дил видос - выложил. Мы его сграбили себе. Через пару дней туб получил абузу от хозяина видоса - видос удалил. А мы потратили время на отбор/кроп/обработку тумб, перевели (за $) дескрипшн на несколько языков и в итоге поимели неработающую галеру.
Поэтому у меня схема такая. На одном единственном мультинише настроено куча грабберов, где все галеры попадают в прелоад. Тут я их отбираю, кроплю тумбы. Далее остальные домены (нишевые или нет) забирают готовый контент с одного места. Поэтому было бы классно что б чекер проверял все статусы, что б на остальные домены не попадали заведомо дохлые галеры.
Re: вопрос по gallery checker
Posted: Sun Oct 08, 2017 6:39 pm
by admin
Нет 100% уверенности про preload поэтому пока добавили как
надо добавить в config.php
$config['gallery_checker_preload'] = true;
а дефолтный вариант будет чекать только активные
Если не будет вопросов по этому варианту добавим как дефолтное поведение.