Page 2 of 3
Re: Возможно ли сграбить эту галерею
Posted: Fri Nov 08, 2019 5:03 am
by Jabar
Что-нибудь прояснилось?
Re: Возможно ли сграбить эту галерею
Posted: Fri Nov 08, 2019 7:46 am
by admin
нет еще, приболел и не занимался вопросом
Re: Возможно ли сграбить эту галерею
Posted: Mon Nov 11, 2019 3:41 pm
by admin
Проблема в настройке ssl \ curl на серваке
доабвил что б в лог писало эти ошибки
в целом проверить можно как
-bash-3.2$ curl
https://wifebucket.net/albums/201909/20 ... fhg-15.jpg
curl: (35) error:14077410:SSL routines:SSL23_GET_SERVER_HELLO:sslv3 alert handshake failure
тут видно что смарт никак не участвует в запросе
Re: Возможно ли сграбить эту галерею
Posted: Tue Nov 12, 2019 7:58 am
by Jabar
т.е. это какието мутные настройки у спонсора? и либо с ним решать вопрос, либо никак?
Или это проблемы у меня на сервере и надо чтото менять в настройках моего сервера?
Re: Возможно ли сграбить эту галерею
Posted: Tue Nov 12, 2019 8:00 am
by admin
это проблема на серваке
надо показать это админу
Re: Возможно ли сграбить эту галерею
Posted: Thu Jan 02, 2020 7:50 am
by proffitraff
Здравствуйте, дабы не создавать новый топик... Есть похожая проблема, лог такой (заменил оригинальные урлы на "галера", "mp4 урл", "тумба"):
Code: Select all
2020-01-02 00:32:19: Processing галера (469) (136.71410393715, 0.0061650276184082)
2020-01-02 00:32:19: FLV URL mp4 урл (136.71417093277, 6.5088272094727E-5)
2020-01-02 00:32:19: Processing FLV mp4 урл (136.72365999222, 0.0094881057739258)
2020-01-02 00:32:19: Gallery description is empty: Update with 'admin added' (136.72370696068, 4.5061111450195E-5)
2020-01-02 00:32:19: Downloading files for a custom gallery (136.72646307945, 0.002755880355835)
2020-01-02 00:32:19: Downloading img тумба to ../tmp/469/tmp//873370.jpg, ref галера (136.72651791573, 5.4836273193359E-5)
...
2020-01-02 00:32:19: Downloading flv_preview_thumb тумба to ../tmp/469/0/469/flv_preview.jpg (136.88441491127, 0.00014781951904297)
2020-01-02 00:32:19: Curl error: (136.88472700119, 0.00031113624572754)
2020-01-02 00:32:19: unset ref (136.88476991653, 4.0054321289062E-5)
2020-01-02 00:32:19: Curl error: (136.88488507271, 0.00011491775512695)
2020-01-02 00:32:19: Can not download movie тумба (Not 200 answer (0) ) (136.88492703438, 3.9815902709961E-5)
2020-01-02 00:32:19: Content type: 4 (136.89217996597, 0.007253885269165)
2020-01-02 00:32:19: Creating thumb from тумба (320x200) (Crop profile: 5) (136.89502000809, 0.0028371810913086)
2020-01-02 00:32:19: Downloading img тумба to ../tmp/469/tmp//493193.jpg, ref галера (136.89513707161, 8.4877014160156E-5)
2020-01-02 00:32:19: Curl error: (136.89545297623, 0.00031709671020508)
2020-01-02 00:32:19: unset ref (136.89549612999, 4.0054321289062E-5)
2020-01-02 00:32:19: Curl error: (136.8956079483, 0.00011301040649414)
2020-01-02 00:32:19: Source Size: 0 (136.89565110207, 4.0054321289062E-5)
2020-01-02 00:32:19: Can not download тумба (Not 200 answer (0) ) (136.89567899704, 2.7179718017578E-5)
2020-01-02 00:32:19: Looks like this is a custom gallery, trying to download source from a saved gallery (136.89591813087, 0.00023984909057617)
2020-01-02 00:32:19: Can not create thumb from тумба (Not 200 answer (0) ) (136.89596700668, 4.57763671875E-5)
2020-01-02 00:32:19: No thumbs were created (136.89599514008, 2.6941299438477E-5)
2020-01-02 00:32:19: Cleanup tmp folder ../tmp/469 (136.89601993561, 2.3126602172852E-5)
2020-01-02 00:32:19: Setting status 'grab error' for this gallery (136.89615511894, 0.00013589859008789)
Замечу, что проблема скачивания только с домена ahacdn.me (там хостятся тумбы), причем не всегда, а как-то рандомно... Бывает нормально, бывает ошибка. С компа я всегда тумбу вижу (грузится нормально), но видимо Смарт не может иногда скачать.
Куда копать, от чего это может зависеть? Может ли быть проблема на серваке (как вы отписывали в этом топике)? До этого никаких проблем скачивания тумб с других доменов, отличных от ahacdn.me, не было.
Re: Возможно ли сграбить эту галерею
Posted: Thu Jan 02, 2020 8:45 am
by admin
Приветствую!
не может с сервака законектитсья на этот ип (статус 0)
может зависить от того что цдн по каким-то ему известным правилам может банить ИП сервака например и тп
Re: Возможно ли сграбить эту галерею
Posted: Thu Jan 02, 2020 2:28 pm
by proffitraff
Странно конечно, что часть сграбилось, часть нет...
А если в СЖСеттингс прописать System proxy, через неё будет грабиться или она на это не влияет? Прописал, но без изменений.
Re: Возможно ли сграбить эту галерею
Posted: Thu Jan 02, 2020 4:42 pm
by admin
Если чуть конкретизировать то вопрос звучит как "будет ли грабить на неизвестном серваке через неизвестную проксю неизвестную галеру на неизвестном хосте который отдает картинки через неизвестный цдн с неивестными правилами"? ))) я не знаю )))
вы можете с сервака попробовать скачать тот же урл через тут же curl в шеле и увидеть похожую картину.
я могу помочь если например конуретную картинку curl в шеле качает, а скрипт - нет. Значит какой-то ньюанс есть в скрипте и это я могу решить, но то что происходит за пределами скрипта - я повлиять не могу
Re: Возможно ли сграбить эту галерею
Posted: Thu Jan 02, 2020 5:01 pm
by proffitraff
Попробовал в шеле - вроде всё нормально, код ответа 200. В логах Смарта этот же урл помечается как "(Not 200 answer (403) )".
