Заказ Требуется обход Avito

[taras123922]

Добрый день, разработали парсер объявлений Авито, но столкнулись с частыми банами ip, использовали мобильные прокси с сменой ip, работает более менее, но при большом количестве разных категорий, не вывозят, требуется большой пул прокси, что не выгодно.
Суть вот в чем, раньше был обход и баны ip прилетали редко и хватало около 5 прокси, при том что парсилось около 100 разных запросов, но авто его прикрыло, возможно тут имеются люди, которые могут найти свежий обход или уже знают.
Связь тг - Телеграмм

 

[Joce]

Довольно сложно такое будет реализовать, авито довольно хорошо сейчас защищает вход от ботов для несанкционированного использования
Точного ответа дать тебе не смогу, но можно попробовать сделать вот так:
1) Постоянная ротация ипов при каждом 10 запросе
2) Смена user agent при каждом запросе
3) добавление случайных задержек между запросами
4) задать лимит запросов в определенное время
5) если надо парсить много контента, то стоит создавать несколько входов в браузер с разным user agent и ипом
других вариантов скорее не будет

 

[taras123922]

Довольно сложно такое будет реализовать, авито довольно хорошо сейчас защищает вход от ботов для несанкционированного использования
Точного ответа дать тебе не смогу, но можно попробовать сделать вот так:
1) Постоянная ротация ипов при каждом 10 запросе
2) Смена user agent при каждом запросе
3) добавление случайных задержек между запросами
4) задать лимит запросов в определенное время
5) если надо парсить много контента, то стоит создавать несколько входов в браузер с разным user agent и ипом
других вариантов скорее не будет

щас так и сделано, не катит, требуется огроменный пул прокси, а 1 прокси по 500р, дело такое