TubeImport - не добавляются галеры

[tubetraffic]

Добрый день,

Импортирую в 100 категорий, скрипт обещает раз в сутки грабить новые, в списке тюбов 5 доменов (xhamster.com,pornhub.com,redtube.com,tube8.com,youporn.com)
В первый день сграбилось примерно по 300 галер в каждую категорию, и вот уже несколько дней тишина. Граббер лог за сегодня:

Code: Select all

2017-05-28 08:19:22: Processing http://xhamster.com/movies/146386/hidden_spy_voyeur.html (80260) (0.13090395927429, 0.13091707229614)
2017-05-28 08:19:22: Content type: 4 (0.2155590057373, 0.084645986557007)
2017-05-28 08:19:23: Creating thumb  (240x180) (Crop profile: 1)  (0.27986001968384, 0.064292907714844)
2017-05-28 08:19:23: Downloading img http://et6.xhamster.com/t/386/3_b_146386.jpg (../tmp/80260/tmp//993616.jpg) (0.28033804893494, 0.00047206878662109)
2017-05-28 08:19:23: Source Size 907 (0.85774993896484, 0.57740998268127)
2017-05-28 08:19:23: File too small to be good image (0.85793995857239, 0.00017690658569336)
2017-05-28 08:19:23: Can not create thumb from http://et6.xhamster.com/t/386/3_b_146386.jpg () (0.85810804367065, 0.00016021728515625)
2017-05-28 08:19:23: No thumbs were created (0.85825514793396, 0.00014090538024902)
2017-05-28 08:19:23: Cleanup tmp folder ../tmp/80260 (0.85840702056885, 0.00014615058898926)
2017-05-28 08:19:23: Setting status 'grab error' for this gallery (0.85887908935547, 0.00046896934509277)
2017-05-28 08:19:23: Delete gallery 80260 mark_grab_error  from /home/prontube.club/public_html/smart/bin/gallery_grabber.php (0.85912704467773, 0.00023913383483887)2017-05-28 09:04:17: Processing http://xhamster.com/movies/36352/young_interracial_couple.html (80261) (0.23017597198486, 0.23018789291382)
2017-05-28 09:04:17: Content type: 4 (0.2426290512085, 0.012444019317627)
2017-05-28 09:04:17: Creating thumb  (240x180) (Crop profile: 1)  (0.28568196296692, 0.043044090270996)
2017-05-28 09:04:17: Downloading img http://et2.xhamster.com/t/352/3_b_36352.jpg (../tmp/80261/tmp//565626.jpg) (0.28618001937866, 0.00049209594726562)
2017-05-28 09:04:18: Source Size 1427 (0.46921110153198, 0.18302798271179)
2017-05-28 09:04:18: File too small to be good image (0.46941494941711, 0.00019097328186035)
2017-05-28 09:04:18: Can not create thumb from http://et2.xhamster.com/t/352/3_b_36352.jpg () (0.46958804130554, 0.00016617774963379)
2017-05-28 09:04:18: No thumbs were created (0.46973299980164, 0.00013899803161621)
2017-05-28 09:04:18: Cleanup tmp folder ../tmp/80261 (0.46988606452942, 0.00014686584472656)
2017-05-28 09:04:18: Setting status 'grab error' for this gallery (0.47036004066467, 0.00046992301940918)
2017-05-28 09:04:18: Delete gallery 80261 mark_grab_error  from /home/prontube.club/public_html/smart/bin/gallery_grabber.php (0.47061705589294, 0.00024914741516113)2017-05-28 09:18:15: Processing http://xhamster.com/movies/589498/mature_gloryhole_wife.html (80262) (0.084624052047729, 0.084635972976685)
2017-05-28 09:18:15: Content type: 4 (0.090901136398315, 0.0062718391418457)
2017-05-28 09:18:15: Creating thumb  (240x180) (Crop profile: 1)  (0.12213110923767, 0.031216144561768)
2017-05-28 09:18:15: Downloading img http://et8.xhamster.com/t/498/3_b_589498.jpg (../tmp/80262/tmp//869531.jpg) (0.12261605262756, 0.00047898292541504)
2017-05-28 09:18:16: Source Size 1415 (0.60128498077393, 0.47866797447205)
2017-05-28 09:18:16: File too small to be good image (0.601487159729, 0.00018692016601562)
2017-05-28 09:18:16: Can not create thumb from http://et8.xhamster.com/t/498/3_b_589498.jpg () (0.60167503356934, 0.00018191337585449)
2017-05-28 09:18:16: No thumbs were created (0.60181713104248, 0.00013613700866699)
2017-05-28 09:18:16: Cleanup tmp folder ../tmp/80262 (0.60197114944458, 0.00014686584472656)
2017-05-28 09:18:16: Setting status 'grab error' for this gallery (0.60246610641479, 0.00049090385437012)
2017-05-28 09:18:16: Delete gallery 80262 mark_grab_error  from /home/prontube.club/public_html/smart/bin/gallery_grabber.php (0.60273003578186, 0.00025606155395508)2017-05-28 09:44:16: Processing http://xhamster.com/movies/210358/redhead_mistress.html (80263) (0.0419921875, 0.042005062103271)
2017-05-28 09:44:16: Content type: 4 (0.04814600944519, 0.0061450004577637)
2017-05-28 09:44:16: Creating thumb  (240x180) (Crop profile: 1)  (0.077297210693359, 0.029145002365112)
2017-05-28 09:44:16: Downloading img http://et8.xhamster.com/t/358/4_b_210358.jpg (../tmp/80263/tmp//323525.jpg) (0.077796220779419, 0.00049304962158203)
2017-05-28 09:44:16: Source Size 1191 (0.27057123184204, 0.19277095794678)
2017-05-28 09:44:16: File too small to be good image (0.27076101303101, 0.00017786026000977)
2017-05-28 09:44:16: Can not create thumb from http://et8.xhamster.com/t/358/4_b_210358.jpg () (0.27094602584839, 0.00017786026000977)
2017-05-28 09:44:16: No thumbs were created (0.27108907699585, 0.0001370906829834)
2017-05-28 09:44:16: Cleanup tmp folder ../tmp/80263 (0.27124309539795, 0.00014710426330566)
2017-05-28 09:44:16: Setting status 'grab error' for this gallery (0.27170705795288, 0.00045990943908691)
2017-05-28 09:44:16: Delete gallery 80263 mark_grab_error  from /home/prontube.club/public_html/smart/bin/gallery_grabber.php (0.27197217941284, 0.00025701522827148)2017-05-28 09:58:15: Processing http://xhamster.com/movies/336336/dancing_with_the_trannys.html (80264) (0.085869073867798, 0.085875034332275)
2017-05-28 09:58:15: Content type: 4 (0.089007139205933, 0.0031328201293945)
2017-05-28 09:58:15: Creating thumb  (240x180) (Crop profile: 1)  (0.13084101676941, 0.041831016540527)
2017-05-28 09:58:15: Downloading img http://et6.xhamster.com/t/336/9_b_336336.jpg (../tmp/80264/tmp//769821.jpg) (0.13118290901184, 0.00033879280090332)
2017-05-28 09:58:16: set ref (0.31342792510986, 0.18226099014282)
2017-05-28 09:58:16: Can not download http://et6.xhamster.com/t/336/9_b_336336.jpg (Not 200 answer (404) ) (0.38422107696533, 0.070773839950562)
2017-05-28 09:58:16: Can not create thumb from http://et6.xhamster.com/t/336/9_b_336336.jpg (Not 200 answer (404) ) (0.38426303863525, 3.504753112793E-5)
2017-05-28 09:58:16: No thumbs were created (0.46015596389771, 0.075903177261353)
2017-05-28 09:58:16: Cleanup tmp folder ../tmp/80264 (0.46036505699158, 0.00020289421081543)
2017-05-28 09:58:16: Setting status 'grab error' for this gallery (0.46091794967651, 0.00053882598876953)
2017-05-28 09:58:16: Delete gallery 80264 mark_grab_error  from /home/prontube.club/public_html/smart/bin/gallery_grabber.php (0.46117997169495, 0.00025296211242676)

Что я делаю не так?

[admin]

Что то у них с картинками однако ..

2017-05-28 09:04:17: Downloading img http://et2.xhamster.com/t/352/3_b_36352.jpg (../tmp/80261/tmp//565626.jpg) (0.28618001937866, 0.00049209594726562)
2017-05-28 09:04:18: Source Size 1427 (0.46921110153198, 0.18302798271179)
2017-05-28 09:04:18: File too small to be good image (0.46941494941711, 0.00019097328186035)

[tubetraffic]

это да, но мне интересно почему в первые сутки он забрал около 30к галер, а вот сегодня 5 и везде фэйл...
я незнаю относится ли в настройках Grabber Settings > Grabber Speed, per minute конкретно к этому типу импорта, там у меня прописано 10. Может кол-во регулируется где то в другом месте.
И еще интересно почему он только по первому тюбу из 5ти шарится, есть же еще 4. Он там только 75 галер с порнхаба забрал пока...

[admin]

К скорости не относится
ПО логу ж видно что добавляются и сразу удаляются потмоу что плохие тумбы

или я что то не так понял ?

[tubetraffic]

ну вопрос был больше про кол-во которое он пытался добавить, день закончился, он порядка 10 урлов посетил, и кажется штуки три тумбы он нашел которые можно добавить. Как увеличить кол-во урлов которые он должен пройти за день?

[admin]

Как вы видите что 10 за день если только в этом логе 10 есть ?

[Andrew1]

Приветствую!

Понадобилось вот воспользоваться TubeImport, сразу уперся
Пытаюсь сохранить в настройках Import Embeded = Embeded Only - не хочет сохранять.

И нужен совет заодно - у многих тюбов есть так называемые channel, типа
https://www.pornhub.com/channels/cum4k/videos?o=ra или
https://xhamster.com/channels/cum4k
Можно как-то заставить скрипт грабить из этих каналов?
Пробовал указывать cum4k в кейвордах, но ничего не находится

[admin]

Приветствую!

давно граббер не проверял для этих сайтов
по сохранению - попробуйте плз ап для начала, а я на этой неделе проверю грабберы

как я понимаю надо именно туб импорт и обычный импорт с этих сайтов не подходит?

[Andrew1]

Хоть и стояла до этого тоже свежая версия, но после апдейта начало сохранять Embeded Only, спасибо

Мне нужен граб эмбедов с тех страниц, примеры которых я показал (грубо говоря - это список галер на тюбе после поиска по какому-нить кею).
Как этого добиться обычным импортом - я не знаю. В тех дампах, что дают вебмастерам эти тюбы, нужных мне кеев нет.
Попробовал через туб импорт с указанием кейвордов - результат выше ...

[admin]

Если туб не дает его - то граббер не сможет его сделать.
А что туб говорит по поводу отсутствия галер в экспорте?