Есть 8 мастеров, на каждом от 2 до 20 слейвов. Как лучше всего подчистить базу от непродуктивных тумбов? В базах на мастерах порядка 100-200К галер на каждом. Сделал следующее:
-прошелся на каждом мастере в Rotation-Special-Delete tested thumbs
ie if gallery has 5 thumbs, all thumbs has been tested
we will delete all thumbs except X best thumbs
for example Best Limit = 2, we will delete 3 (5-2) worst thumbs.
Выставил 1. Было много пиксовых галер с 5-20 тумбами на галеру.
После этого вижу большое колво битых ссылок на тумбы на мордах. Скрипт не только удалил данные из базы, но и физически удалил файл тумбы.
Пришлось искать битые тумбы и удалять их вручную.
Такой вопрос-где стоят настройка удалять или не удалять файл тумбы?
Кроме того:
Rotation-Special-Delete low-CTR thumbs
надо делать на каждом сайте-слейве ? Этот процесс как-то можно автоматизировать?
Jabar советовал настроить в каждой группе на мастере шифт, по которому будут добавляться в группу нужное колво тумб, а плохие-удаляться.
Как правильно удалить тумбы
Re: Как правильно удалить тумбы
Не совсем ясен смысл удалять из базы но при этом не удалять саму тумбу ?
цель этого - забить винт тумбами ? )
на странице может быть битой тк тумба уже удалена, а страница еще в кеше. Решается удалением кеша.
По удалению непродуктивных - это сложный вопрос со слейвами.Тк тумба может быть продуктивной на одном слейве, но непродуктивной на другом. решения в одну кнопку в данный момент нет, потому что не ясно как этот вопрос решать логически, а не технически.
цель этого - забить винт тумбами ? )
на странице может быть битой тк тумба уже удалена, а страница еще в кеше. Решается удалением кеша.
По удалению непродуктивных - это сложный вопрос со слейвами.Тк тумба может быть продуктивной на одном слейве, но непродуктивной на другом. решения в одну кнопку в данный момент нет, потому что не ясно как этот вопрос решать логически, а не технически.
Don't forget to run script update
-
richmantrade
- Posts: 1036
- Joined: Tue Dec 04, 2012 8:46 am
Re: Как правильно удалить тумбы
А мне очень даже ясен. Более того, сам считаю такую возможность не лишнейadmin wrote:Не совсем ясен смысл удалять из базы но при этом не удалять саму тумбу ?
К примеру был мастер и n_ное кол_во слейвов. На мастре были настроены грабберы, которые собирали контент.
Далее, мастер и слейвы в "гугловом банне", нужна революция
Решено разделить контент на n доменов, которые теперь станут мастерами. В такой ситуации, тумбы на сервере фактически нужны, а вот вбазе мастера - нет.
PS: я совсем не ратую за придумывание какой-нибудь "новой кнопки"
Re: Как правильно удалить тумбы
Как именно вы в данном случае делете онтент по сайтам ?
Don't forget to run script update
-
richmantrade
- Posts: 1036
- Joined: Tue Dec 04, 2012 8:46 am
Re: Как правильно удалить тумбы
Допустим было 10 000 галер и 5 сайтов.
На первом сайте (который был мастером) оставляю 2 тысячи в Active, остальные - в Hidden.
Далее экспорчу эти хиддены, в текстовом фалике делю поровну, и экспорчу на оставшиеся 5 доменов с хотлинком тумб.
Получается, что фактически на первом сайте галеры не нужны, но удалить их нельзя, ибо удаляться тумбы.
ЗЫ: Понятное дело, если перекачивать тумбы, то впоследствии удалить можно. Но мне как то религия не позволяет дублировать один и тот же контент на сотни доменов.
ЗЫ2: Ситуация описана мною весьма поверхностно (схематично), на самом деле мои схемы сложнее
. Но я еще раз замечу - лично я не считаю уж очень необходимой кнопку "Удалить из базы без удаления тумб".
На первом сайте (который был мастером) оставляю 2 тысячи в Active, остальные - в Hidden.
Далее экспорчу эти хиддены, в текстовом фалике делю поровну, и экспорчу на оставшиеся 5 доменов с хотлинком тумб.
Получается, что фактически на первом сайте галеры не нужны, но удалить их нельзя, ибо удаляться тумбы.
ЗЫ: Понятное дело, если перекачивать тумбы, то впоследствии удалить можно. Но мне как то религия не позволяет дублировать один и тот же контент на сотни доменов.
ЗЫ2: Ситуация описана мною весьма поверхностно (схематично), на самом деле мои схемы сложнее
Re: Как правильно удалить тумбы
Можно просто отключи ть часть групп \ спонсоров на одном из сайтов.
Либо импортировать без хотлинка, а на мастере удалять.
Кроме того тут вы пишете что делаете их hidden, а ранее писали что удаляете - какой вариант все же верный ?
Либо импортировать без хотлинка, а на мастере удалять.
Кроме того тут вы пишете что делаете их hidden, а ранее писали что удаляете - какой вариант все же верный ?
Don't forget to run script update
-
richmantrade
- Posts: 1036
- Joined: Tue Dec 04, 2012 8:46 am
Re: Как правильно удалить тумбы
Вариант "hidden".admin wrote:Можно просто отключи ть часть групп \ спонсоров на одном из сайтов.
Либо импортировать без хотлинка, а на мастере удалять.
Кроме того тут вы пишете что делаете их hidden, а ранее писали что удаляете - какой вариант все же верный ?
Я специально поиском по странице прошелся... Я не писал раннее , что я их удаляю.
Re: Как правильно удалить тумбы
Сорри, это я начал топик с начала читать.
Те когда вы ставите галере статус hidden - у ее удаляются тумбы ?
или я что-то не так понял ?
В чем именно сейчас проблема ?
Те когда вы ставите галере статус hidden - у ее удаляются тумбы ?
или я что-то не так понял ?
В чем именно сейчас проблема ?
Don't forget to run script update
-
richmantrade
- Posts: 1036
- Joined: Tue Dec 04, 2012 8:46 am
Re: Как правильно удалить тумбы
Нет нет. Проблемы никакой.
Тумбы при статусе hidden не удаляются.
Тумбы при статусе hidden не удаляются.







