вопрос по gallery checker

svenx
Posts: 173
Joined: Sat Jul 01, 2017 12:18 pm

вопрос по gallery checker

Post by svenx »

Привет,
а чекер проверяет все галеры всегда?
Или если я задам правила для определенных доменов и default правило не стану указывать - то будет грузить только галеры с этих доменов?
Как-то из лога непонятно (
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: вопрос по gallery checker

Post by admin »

Всегда проверяет все.
А надо по доменам по какой то причине ?
Don't forget to run script update
svenx
Posts: 173
Joined: Sat Jul 01, 2017 12:18 pm

Re: вопрос по gallery checker

Post by svenx »

admin wrote:Всегда проверяет все.
А надо по доменам по какой то причине ?
было бы лучше по доменам -
потому что:
по некоторым доменам можно настроить RSS итп и удалять через Sets
а по некоторым нельзя - и тогда их проверять уже чекером
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: вопрос по gallery checker

Post by admin »

Да, хорошая мысль, доделаем
Don't forget to run script update
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: вопрос по gallery checker

Post by admin »

Доделано в виде

domain.com|skip

значит галеры с этого домена не проверять
Don't forget to run script update
richmantrade
Posts: 1036
Joined: Tue Dec 04, 2012 8:46 am

Re: вопрос по gallery checker

Post by richmantrade »

Скажите плиз, а чекер из любого статуса галеры чекает и в инактив отправляет (если конечно сработало правило) ?
Я замечаю в Preload , когда тумбы кроплю, много удаленных (у спонсора) галер, при этом в логе чекера:

Code: Select all

2017-10-06 10:36:12: Adding galleries from 0 Speed 0 b\s, 0 urls\min (0.00099492073059082, 0.00099802017211914)
2017-10-06 10:36 Adding galleries from 0 Speed 0 b\s, 0 urls\min (0.0088980197906494, 0.0088980197906494) 
2017-10-06 10:36:12: All galleries has been checked today. Sleep till tomorrow (6780 seconds)  (0.0028548240661621, 0.0018570423126221)
2017-10-06 10:36 All galleries has been checked today. Sleep till tomorrow (6780 seconds)  (0.0093669891357422, 0.00046896934509277) 
2017-10-06 10:37:13: Adding galleries from 0 Speed 0 b\s, 0 urls\min (0.00072813034057617, 0.00073099136352539)
2017-10-06 10:37 Adding galleries from 0 Speed 0 b\s, 0 urls\min (0.0072970390319824, 0.0072970390319824) 
2017-10-06 10:37:13: All galleries has been checked today. Sleep till tomorrow (6719 seconds)  (0.0024600028991699, 0.0017299652099609)
2017-10-06 10:37 All galleries has been checked today. Sleep till tomorrow (6719 seconds)  (0.0077230930328369, 0.00042605400085449) 
Пример удаленной галеры: https://www.txxx.com/videos/4612261/lez ... romo=10281
Хедер у этого урла - HTTP/2.0 404 Not Found и в хтмл_е есть - <h1>Oops! Page not found</h1>
В рулезах чекера:
txxx.com|Oops! Page not found
default|http_code_404

Оговорюсь сразу - галерей в прелоаде много. Может скрипт просто не успевает все прочекать ? Как это вообще проверить/справить можно ?
V 2.1 Build 201709181031
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: вопрос по gallery checker

Post by admin »

Проверяет только активные.
те прелоад тут никак.
Don't forget to run script update
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: вопрос по gallery checker

Post by admin »

кстати как она попала в прелоад если она была недоступна ?
Don't forget to run script update
richmantrade
Posts: 1036
Joined: Tue Dec 04, 2012 8:46 am

Re: вопрос по gallery checker

Post by richmantrade »

admin wrote:Проверяет только активные.
А в остальных статусах проверять - сложно сделать ? И сейчас я объясню для чего мне это нужно.
admin wrote:кстати как она попала в прелоад если она была недоступна ?
Так она когда грабилась - была рабочая. Оно ж как происходит: туб спи%дил видос - выложил. Мы его сграбили себе. Через пару дней туб получил абузу от хозяина видоса - видос удалил. А мы потратили время на отбор/кроп/обработку тумб, перевели (за $) дескрипшн на несколько языков и в итоге поимели неработающую галеру.

Поэтому у меня схема такая. На одном единственном мультинише настроено куча грабберов, где все галеры попадают в прелоад. Тут я их отбираю, кроплю тумбы. Далее остальные домены (нишевые или нет) забирают готовый контент с одного места. Поэтому было бы классно что б чекер проверял все статусы, что б на остальные домены не попадали заведомо дохлые галеры.
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: вопрос по gallery checker

Post by admin »

Нет 100% уверенности про preload поэтому пока добавили как

надо добавить в config.php

$config['gallery_checker_preload'] = true;

а дефолтный вариант будет чекать только активные

Если не будет вопросов по этому варианту добавим как дефолтное поведение.
Don't forget to run script update
Post Reply