граббится 1 галера (max) за 1 минуту

admin
Site Admin
Posts: 37202
Joined: Wed Sep 10, 2008 11:43 am

Re: граббится 1 галера (max) за 1 минуту

Post by admin »

Отлично.
Don't forget to run script update
Toxa
Posts: 126
Joined: Wed Aug 02, 2017 5:43 pm

Re: граббится 1 галера (max) за 1 минуту

Post by Toxa »

Столкнулся с такой-же проблемой, граббер очень странно работает - ооочень медленно, цифры в Active всегда равны цифрам в Processing и перестает грабить, когда количество активных галь = цифре, указанной в Gallery Grabber Threads, count. Лог граббера вообще пустой. При этом удаляет как и прежде шустро. Ап провел - не помогло. Что может быть?
admin
Site Admin
Posts: 37202
Joined: Wed Sep 10, 2008 11:43 am

Re: граббится 1 галера (max) за 1 минуту

Post by admin »

Если лог пустой совсем то вероятнее всего в пхп.ини запрещен exec
если нет - тогда скидывайте шел, я проверю
Don't forget to run script update
Toxa
Posts: 126
Joined: Wed Aug 02, 2017 5:43 pm

Re: граббится 1 галера (max) за 1 минуту

Post by Toxa »

Отправил данные в личку
admin
Site Admin
Posts: 37202
Joined: Wed Sep 10, 2008 11:43 am

Re: граббится 1 галера (max) за 1 минуту

Post by admin »

если запустить руками

php gallery_grabber.php

то выпадает в

Segmentation fault

это 100% вопрос пхп + куб текущей сборки, либо память в редких случай.
В целом лучше начать с обновления пхп и куба
Don't forget to run script update
bobs
Posts: 254
Joined: Thu Dec 13, 2012 7:18 pm

Re: граббится 1 галера (max) за 1 минуту

Post by bobs »

АНАЛОГИЧНО... последний билд поставили, и прямо затормозилась грабилка...
ошибки про какой-то фейс идут сплошняком
2018-05-22 07:48:07: Face detect Cmd : /home/domains//face --input=../tmp/1/tmp//13484.jpg.tmp.jpg --cascade=/home/domains/1.xml (1.9695439338684, 5.793571472168E-5)
2018-05-22 07:48:07: Output : sh: /home/domains//face: No such file or directory
bobs
Posts: 254
Joined: Thu Dec 13, 2012 7:18 pm

Re: граббится 1 галера (max) за 1 минуту

Post by bobs »

Build 201805220608 (Current build: 201805220608 )

2018-05-22 07:48:05: Processing http://2b2921f604f360aeb88136f9cc85a526/ (1) (0.0022668838500977, 0.0022728443145752)
2018-05-22 07:48:05: Gallery description is empty: Update with '-' (0.00341796875, 0.0011448860168457)
2018-05-22 07:48:05: Content type: 4 (0.010835886001587, 0.0074248313903809)
2018-05-22 07:48:05: Creating thumb (320x240) (Crop profile: 1) (0.01125693321228, 0.00040984153747559)
2018-05-22 07:48:05: Downloading img http://thumb-v6.xhcdn.com/a/muVcDz_oRhX ... 2000.9.jpg (../tmp/1/tmp//173470.jpg) (0.011427879333496, 0.00016999244689941)
2018-05-22 07:48:06: Source Size 53883 (0.55113983154297, 0.53971791267395)
2018-05-22 07:48:06: Make thumb ../tmp/1/tmp//173470.jpg (0.55127692222595, 0.00012898445129395)
2018-05-22 07:48:06: Creating thumb ../tmp/1/tmp//85209.jpg.tmp.jpg -> ../tmp/1/tmp//85209.jpg (0.55141186714172, 0.00013399124145508)
2018-05-22 07:48:06: Identify /usr/bin//identify -verbose ../tmp/1/tmp//85209.jpg.tmp.jpg (0.5517098903656, 0.00029611587524414)
2018-05-22 07:48:06: Size: 1280x720 (../tmp/1/tmp//85209.jpg.tmp.jpg) thumb: 320x240
thumb_ratio: 1.3333333333333 img_ratio: 1.7777777777778 to ../tmp/1/tmp//85209.jpg (0.63686490058899, 0.085159063339233)
2018-05-22 07:48:06: Cut image (0.63699579238892, 0.00012302398681641)
2018-05-22 07:48:06: Face detect Cmd : /home/domains//face --input=../tmp/1/tmp//85209.jpg.tmp.jpg --cascade=/home/domains/1.xml (0.63707780838013, 8.1062316894531E-5)
2018-05-22 07:48:06: Output : sh: /home/domains//face: No such file or directory
(0.63919401168823, 0.0021200180053711)
2018-05-22 07:48:06: IM Cmd custom : /usr/bin//convert -crop +160+0 +repage -crop -160-0 +repage -resize 320x240^ -gravity Center -crop 320x240+0+0 -filter Blackman -modulate 105,102,100 -enhance -sharpen 1x1 -quality 85 -strip ../tmp/1/tmp//85209.jpg.tmp.jpg[1] ../tmp/1/tmp//85209.jpg (0.63928890228271, 8.9168548583984E-5)
2018-05-22 07:48:06: Identify /usr/bin//identify -verbose ../tmp/1/tmp//85209.jpg (0.67774391174316, 0.038463830947876)
2018-05-22 07:48:06: Creating thumb (320x240) (Crop profile: 1) (0.69651389122009, 0.018763065338135)
2018-05-22 07:48:06: Downloading img http://thumb-v6.xhcdn.com/a/AWbyzecBZJz ... 2000.1.jpg (../tmp/1/tmp//440384.jpg) (0.69661092758179, 8.8930130004883E-5)
2018-05-22 07:48:06: Source Size 47037 (1.2212829589844, 0.52467679977417)
2018-05-22 07:48:06: Make thumb ../tmp/1/tmp//440384.jpg (1.2213709354401, 7.9870223999023E-5)
2018-05-22 07:48:06: Creating thumb ../tmp/1/tmp//47665.jpg.tmp.jpg -> ../tmp/1/tmp//47665.jpg (1.2214980125427, 0.00012588500976562)
2018-05-22 07:48:06: Identify /usr/bin//identify -verbose ../tmp/1/tmp//47665.jpg.tmp.jpg (1.2215459346771, 4.5061111450195E-5)
2018-05-22 07:48:06: Size: 1280x720 (../tmp/1/tmp//47665.jpg.tmp.jpg) thumb: 320x240
thumb_ratio: 1.3333333333333 img_ratio: 1.7777777777778 to ../tmp/1/tmp//47665.jpg (1.3066849708557, 0.085142850875854)
2018-05-22 07:48:06: Cut image (1.3068308830261, 0.00013899803161621)
2018-05-22 07:48:06: Face detect Cmd : /home/domains//face --input=../tmp/1/tmp//47665.jpg.tmp.jpg --cascade=/home/domains/1.xml (1.3068997859955, 6.6995620727539E-5)
2018-05-22 07:48:06: Output : sh: /home/domains//face: No such file or directory
(1.3093349933624, 0.0024380683898926)
2018-05-22 07:48:06: IM Cmd custom : /usr/bin//convert -crop +160+0 +repage -crop -160-0 +repage -resize 320x240^ -gravity Center -crop 320x240+0+0 -filter Blackman -modulate 105,102,100 -enhance -sharpen 1x1 -quality 85 -strip ../tmp/1/tmp//47665.jpg.tmp.jpg[1] ../tmp/1/tmp//47665.jpg (1.3094208240509, 8.0108642578125E-5)
2018-05-22 07:48:06: Identify /usr/bin//identify -verbose ../tmp/1/tmp//47665.jpg (1.3476588726044, 0.038247108459473)
2018-05-22 07:48:06: Creating thumb (320x240) (Crop profile: 1) (1.3670289516449, 0.019362926483154)
2018-05-22 07:48:06: Downloading img http://thumb-v6.xhcdn.com/a/tHk_ZWF6JIY ... 2000.2.jpg (../tmp/1/tmp//935011.jpg) (1.3671410083771, 0.00010585784912109)
2018-05-22 07:48:07: Source Size 71781 (1.8894329071045, 0.52229714393616)
2018-05-22 07:48:07: Make thumb ../tmp/1/tmp//935011.jpg (1.8895189762115, 7.7962875366211E-5)
2018-05-22 07:48:07: Creating thumb ../tmp/1/tmp//13484.jpg.tmp.jpg -> ../tmp/1/tmp//13484.jpg (1.8896629810333, 0.00014281272888184)
2018-05-22 07:48:07: Identify /usr/bin//identify -verbose ../tmp/1/tmp//13484.jpg.tmp.jpg (1.8897078037262, 4.1961669921875E-5)
2018-05-22 07:48:07: Size: 1280x720 (../tmp/1/tmp//13484.jpg.tmp.jpg) thumb: 320x240
thumb_ratio: 1.3333333333333 img_ratio: 1.7777777777778 to ../tmp/1/tmp//13484.jpg (1.9693548679352, 0.079649925231934)
2018-05-22 07:48:07: Cut image (1.9694838523865, 0.00012302398681641)
2018-05-22 07:48:07: Face detect Cmd : /home/domains//face --input=../tmp/1/tmp//13484.jpg.tmp.jpg --cascade=/home/domains/1.xml (1.9695439338684, 5.793571472168E-5)
2018-05-22 07:48:07: Output : sh: /home/domains//face: No such file or directory
(1.9719200134277, 0.0023801326751709)
2018-05-22 07:48:07: IM Cmd custom : /usr/bin//convert -crop +160+0 +repage -crop -160-0 +repage -resize 320x240^ -gravity Center -crop 320x240+0+0 -filter Blackman -modulate 105,102,100 -enhance -sharpen 1x1 -quality 85 -strip ../tmp/1/tmp//13484.jpg.tmp.jpg[1] ../tmp/1/tmp//13484.jpg (1.9719998836517, 7.4148178100586E-5)
2018-05-22 07:48:07: Identify /usr/bin//identify -verbose ../tmp/1/tmp//13484.jpg (2.011353969574, 0.039363861083984)
2018-05-22 07:48:07: Detect img size for ../tmp/1/tmp//85209.jpg (320 x 240) (2.0304160118103, 0.019053936004639)
2018-05-22 07:48:07: Saving thumb (2): title:Stepmom Share The Same Room With Her Stepson, desc:() (2.032928943634, 0.0025081634521484)
2018-05-22 07:48:07: Saving thumb: local to ../vids/ (2.0330908298492, 0.00016093254089355)
2018-05-22 07:48:07: Saving ../vids/0//002_Stepmom_Her.jpg (source ../tmp/1/tmp//85209.jpg) (2.0332119464874, 0.00011897087097168)
2018-05-22 07:48:07: Detect img size for ../tmp/1/tmp//47665.jpg (320 x 240) (2.0334959030151, 0.00028181076049805)
2018-05-22 07:48:07: Saving thumb (3): title:Stepmom Share The Same Room With Her Stepson, desc:() (2.0349509716034, 0.0014519691467285)
2018-05-22 07:48:07: Saving thumb: local to ../vids/ (2.0350239276886, 7.2956085205078E-5)
2018-05-22 07:48:07: Saving ../vids/0//003_Room_With.jpg (source ../tmp/1/tmp//47665.jpg) (2.035071849823, 4.6968460083008E-5)
2018-05-22 07:48:07: Detect img size for ../tmp/1/tmp//13484.jpg (320 x 240) (2.0353147983551, 0.00024104118347168)
2018-05-22 07:48:07: Saving thumb (4): title:Stepmom Share The Same Room With Her Stepson, desc:() (2.0366458892822, 0.0013298988342285)
2018-05-22 07:48:07: Saving thumb: local to ../vids/ (2.0367188453674, 7.2002410888672E-5)
2018-05-22 07:48:07: Saving ../vids/0//004_Room_With.jpg (source ../tmp/1/tmp//13484.jpg) (2.0367708206177, 4.9114227294922E-5)
2018-05-22 07:48:07: Cleanup tmp folder ../tmp/1 (2.0369729995728, 0.0001990795135498)
bobs
Posts: 254
Joined: Thu Dec 13, 2012 7:18 pm

Re: граббится 1 галера (max) за 1 минуту

Post by bobs »

судя по всему какие то проблемы или с фейс детект(бета) стер настройку, или с последней версией ионкуба
Toxa
Posts: 126
Joined: Wed Aug 02, 2017 5:43 pm

Re: граббится 1 галера (max) за 1 минуту

Post by Toxa »

Хз хз, запустил всё тоже самое на убунту, полет нормальный.

Пересобрал пхп и куб на CentOs 7

php gallery_grabber.php
25 threads already

Еле сграбило 25 галь и остановилось...
admin
Site Admin
Posts: 37202
Joined: Wed Sep 10, 2008 11:43 am

Re: граббится 1 галера (max) за 1 минуту

Post by admin »

sh: /home/domains//face: No such file or directory

его просто нет, так что он никак не влияет , можно просто убрать из кроп профайла

Какие сейчас версии пхп и куб?
Don't forget to run script update
Post Reply