Page 1 of 1

Как правильно удалить тумбы

Posted: Tue Jan 13, 2015 1:05 pm
by vaal
Есть 8 мастеров, на каждом от 2 до 20 слейвов. Как лучше всего подчистить базу от непродуктивных тумбов? В базах на мастерах порядка 100-200К галер на каждом. Сделал следующее:
-прошелся на каждом мастере в Rotation-Special-Delete tested thumbs
ie if gallery has 5 thumbs, all thumbs has been tested
we will delete all thumbs except X best thumbs
for example Best Limit = 2, we will delete 3 (5-2) worst thumbs.
Выставил 1. Было много пиксовых галер с 5-20 тумбами на галеру.

После этого вижу большое колво битых ссылок на тумбы на мордах. Скрипт не только удалил данные из базы, но и физически удалил файл тумбы.

Пришлось искать битые тумбы и удалять их вручную.

Такой вопрос-где стоят настройка удалять или не удалять файл тумбы?

Кроме того:
Rotation-Special-Delete low-CTR thumbs

надо делать на каждом сайте-слейве ? Этот процесс как-то можно автоматизировать?
Jabar советовал настроить в каждой группе на мастере шифт, по которому будут добавляться в группу нужное колво тумб, а плохие-удаляться.

Re: Как правильно удалить тумбы

Posted: Tue Jan 13, 2015 1:41 pm
by admin
Не совсем ясен смысл удалять из базы но при этом не удалять саму тумбу ?
цель этого - забить винт тумбами ? )

на странице может быть битой тк тумба уже удалена, а страница еще в кеше. Решается удалением кеша.

По удалению непродуктивных - это сложный вопрос со слейвами.Тк тумба может быть продуктивной на одном слейве, но непродуктивной на другом. решения в одну кнопку в данный момент нет, потому что не ясно как этот вопрос решать логически, а не технически.

Re: Как правильно удалить тумбы

Posted: Tue Jan 13, 2015 2:03 pm
by richmantrade
admin wrote:Не совсем ясен смысл удалять из базы но при этом не удалять саму тумбу ?
А мне очень даже ясен. Более того, сам считаю такую возможность не лишней

К примеру был мастер и n_ное кол_во слейвов. На мастре были настроены грабберы, которые собирали контент.
Далее, мастер и слейвы в "гугловом банне", нужна революция
Решено разделить контент на n доменов, которые теперь станут мастерами. В такой ситуации, тумбы на сервере фактически нужны, а вот вбазе мастера - нет.

PS: я совсем не ратую за придумывание какой-нибудь "новой кнопки" :). Просто, мысли вслух, на предмет "для чего это нужно" ;)

Re: Как правильно удалить тумбы

Posted: Tue Jan 13, 2015 2:27 pm
by admin
Как именно вы в данном случае делете онтент по сайтам ?

Re: Как правильно удалить тумбы

Posted: Tue Jan 13, 2015 3:02 pm
by richmantrade
Допустим было 10 000 галер и 5 сайтов.
На первом сайте (который был мастером) оставляю 2 тысячи в Active, остальные - в Hidden.
Далее экспорчу эти хиддены, в текстовом фалике делю поровну, и экспорчу на оставшиеся 5 доменов с хотлинком тумб.
Получается, что фактически на первом сайте галеры не нужны, но удалить их нельзя, ибо удаляться тумбы.

ЗЫ: Понятное дело, если перекачивать тумбы, то впоследствии удалить можно. Но мне как то религия не позволяет дублировать один и тот же контент на сотни доменов.

ЗЫ2: Ситуация описана мною весьма поверхностно (схематично), на самом деле мои схемы сложнее :). Но я еще раз замечу - лично я не считаю уж очень необходимой кнопку "Удалить из базы без удаления тумб".

Re: Как правильно удалить тумбы

Posted: Tue Jan 13, 2015 3:08 pm
by admin
Можно просто отключи ть часть групп \ спонсоров на одном из сайтов.
Либо импортировать без хотлинка, а на мастере удалять.

Кроме того тут вы пишете что делаете их hidden, а ранее писали что удаляете - какой вариант все же верный ?

Re: Как правильно удалить тумбы

Posted: Tue Jan 13, 2015 3:12 pm
by richmantrade
admin wrote:Можно просто отключи ть часть групп \ спонсоров на одном из сайтов.
Либо импортировать без хотлинка, а на мастере удалять.

Кроме того тут вы пишете что делаете их hidden, а ранее писали что удаляете - какой вариант все же верный ?
Вариант "hidden".
Я специально поиском по странице прошелся... Я не писал раннее , что я их удаляю.

Re: Как правильно удалить тумбы

Posted: Tue Jan 13, 2015 3:16 pm
by admin
Сорри, это я начал топик с начала читать.

Те когда вы ставите галере статус hidden - у ее удаляются тумбы ?
или я что-то не так понял ?
В чем именно сейчас проблема ?

Re: Как правильно удалить тумбы

Posted: Wed Jan 14, 2015 6:26 am
by richmantrade
Нет нет. Проблемы никакой.
Тумбы при статусе hidden не удаляются.

Re: Как правильно удалить тумбы

Posted: Wed Jan 14, 2015 1:54 pm
by admin
Ок )