Помогите с граббером, плз...

admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Помогите с граббером, плз...

Post by admin »

Должно и редирект обрбатывать
Другое дело что по идее оно должно заменять хпасс на актуальное значение, а у вас заменяет именно урл в начале ? или урл тот же а хпасс заменяет на пустоту?
Don't forget to run script update
Andrew1
Posts: 981
Joined: Fri Nov 30, 2012 1:18 pm
Contact:

Re: Помогите с граббером, плз...

Post by Andrew1 »

Дык вот не хочет редирект обрабатывать... Хпасс для обоих урлов одинаковый, без редиректа показывает .мр4 файл, с редиректом - нет
Без редиректа оно вот так выдает/заменяет -
http://www.40somethingmag.com/xxx-matur ... 00_T01.mp4|||||||
(вместе с непонятными разделителями в конце)
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Помогите с граббером, плз...

Post by admin »

Покажите плз строку в code таге, а то форум режет ее и не могу скопировать как есть
Don't forget to run script update
Andrew1
Posts: 981
Joined: Fri Nov 30, 2012 1:18 pm
Contact:

Re: Помогите с граббером, плз...

Post by Andrew1 »

ПКМ, Copy link помогает :)

Code: Select all

http://www.40somethingmag.com/xxx-mature-videos/Gia-Francesca-/57513/|//cdn.scoreuniverse.com/40somethingmag/videos/auditions/GiaFrancesca_34074/Trailers/GiaFrancesca_34074_1280x720_2600_T01.mp4|||||||
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Помогите с граббером, плз...

Post by admin »

Ага, вижу, это они решили зачем-то редиректы сделать по юзерагентам и показывать разный контент
добавил в ап проверку
Don't forget to run script update
Andrew1
Posts: 981
Joined: Fri Nov 30, 2012 1:18 pm
Contact:

Re: Помогите с граббером, плз...

Post by Andrew1 »

Теперь заработало, спасибо!
И последний вопрос, наверное, если .мр4 файл вызывается ява-скриптом, как счас модно, его тоже можно через XPath вытянуть?
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Помогите с граббером, плз...

Post by admin »

Тут надо будет доделать regexp
скидывайте пример, я на нем протестирую
Don't forget to run script update
Andrew1
Posts: 981
Joined: Fri Nov 30, 2012 1:18 pm
Contact:

Re: Помогите с граббером, плз...

Post by Andrew1 »

Хорошо бы хомяка - https://xhamster.com/videos/a-holiday-special-9149796
но у него там что-то все сложно :(

И можно старый пример - http://join.40somethingmag.com/gallery/ ... jUuMC4wLjA
В нем просто есть и текстовые ссылки на .мр4 файл, (их я и использовал, но это частный случай), и есть мувик вызывающийся ява скриптом.
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Помогите с граббером, плз...

Post by admin »

Так у хамстера есть обычный фид, что с него парсить таким образом ?
Don't forget to run script update
Andrew1
Posts: 981
Joined: Fri Nov 30, 2012 1:18 pm
Contact:

Re: Помогите с граббером, плз...

Post by Andrew1 »

те же .мр4, а с них уникальные тумбы...
но если там сложно, то фиг с ним :)
Post Reply