ZebroidФорумПубличный разделБаги / ОшибкиАрхивПарсинг картинко с Google

Парсинг картинко с Google

07 июля 2022, 18:43
Зарегистрирован: 19 декабря 2021, 19:21
Какая то проблема с парсингом и автоматическим добавлением картинок из гугла (большие и не безопасный поиск)
Использовал и ip4 и ip6 и мобильные прокси и покупные и шаред… процесс парсинга происходит быстро, а вот на моменте Загрузить и добавить доходит до 4-8 % и после этого вижу как прокси начинают постепенно отваливаться, в итоге получаю ошибку «Слишком много неудачных попыток»… прокси было от 250 штук до 5… потоков выставлял от 20 до 1 — все равно получаю таккую ошибку (версия 6.3.1 билд 26000).
Без прокси получается в 1 поток обработать штук 20-30 статей (по 1-4 картинки), потом при повторном запуске доходит до 100% и висит…
могу дать список проксей которые я использовал (с авторизацией)… недели 2 неюзаал Зеброид — было все оке… щас БЯДА
Хелп

PS — только что проверил прокси на перевод через google API — все отработало на ура, а вот с картинками — нет

Комментарий отредактирован 1 раз(а). Последний раз редактировал vezelvu 07 июля 2022, 18:48.
08 июля 2022, 09:27
Зарегистрирован: 21 сентября 2011, 13:43
Скиньте свой проект и прокси — посмотрю.

08 июля 2022, 10:10
Зарегистрирован: 19 декабря 2021, 19:21
Скинул в личку

08 июля 2022, 14:53
Зарегистрирован: 10 апреля 2012, 00:00
Нашел проблемы: из-за того, что некоторые ссылки не рабочие программа ошибочно думает, что проблема с прокси.

Тему перенес в Баги, исправлю в ближайшее время.

08 июля 2022, 14:59
Зарегистрирован: 19 декабря 2021, 19:21
пасибо, буду ждать