Код парсинга на python с использованием списка прокси
Входные данные:
список бесплатных прокси (например отсюда https://awmproxy.com/freeproxy.php)
список useragents
Требуемый алгоритм:
1) с использованием случаного прокси и useragent входит на указанный адрес
2) сохраняет страницу в словарь или файл
3) меняет прокси, чтобы не забанили и капча не появилась
4) повторяет действие со следующей страницей
5) эти действия должны выполняться в несколько потоков
Срок: сегодня до 20ч !