1 Востаннє редагувалося dialectstat (17.05.2019 14:07:54)

Тема: Як анонімно скачувати контент?

З Python періодично скачую деякий контент

requests.get(uri).content

В один прексрасний момент отримую помилку

requests.exceptions.SSLError: HTTPSConnectionPool(host='*******.com', port=443): Max retries exceeded with url: /image?t***** (Caused by SSLError(SSLError("bad handshake: SysCallError(104, 'ECONNRESET')",),))

Як анонімно робити requests.get(uri).content, щоб мій ІР не попав в чорний список, або як змінювати свій ІР по типу VPN?

2

Re: Як анонімно скачувати контент?

Вам треба знайти десь відкритий проксі (чи купити закритий), а далі https://stackoverflow.com/questions/828 … sts-module

Подякували: leofun011

3 Востаннє редагувалося koala (17.05.2019 14:13:59)

Re: Як анонімно скачувати контент?

Пошук в Google free proxy list дає кілька сайтів зі списками.

4

Re: Як анонімно скачувати контент?

Скачати список проксі-серверів. Під час підключення час-від-часу змінювати проксі. Як - подивіться в документації до бібліотеки requests. Де взяти список проксі? Зпарсити з якогось сайту або знайти сервіси, з яких можна експортувати готовий список.

Подякували: leofun011

5

Re: Як анонімно скачувати контент?

Дякую, а це легально під час підключення час-від-часу змінювати проксі?

6

Re: Як анонімно скачувати контент?

dialectstat написав:

Дякую, а це легально під час підключення час-від-часу змінювати проксі?

Будь-який спосіб встановлення зв'язку для вас легальний. Нелегальним може бути лише контент, ну і якщо ви - провайдер, то є недоврегульоване питання зв'язку із деякими російськими сайтами.

Подякували: dialectstat, Monolith2

7

Re: Як анонімно скачувати контент?

З проксями одна біда. Їх менше ніж людей, які ними користуються. І якщо якийсь сайт закрив вам доступ через перевищення ліміту. То з дуже великою ймовірністю це вже сталось для всіх публічних проксі серверів також.

8

Re: Як анонімно скачувати контент?

Vo_Vik написав:

З проксями одна біда. Їх менше ніж людей, які ними користуються. І якщо якийсь сайт закрив вам доступ через перевищення ліміту. То з дуже великою ймовірністю це вже сталось для всіх публічних проксі серверів також.

Не так багатьом людям потрібен той сайт.

9

Re: Як анонімно скачувати контент?

Подивіться на сайті, можливо написано, який ліміт підключень. Або тестовим шляхом визначте. Цілком можливо можна обійтися простим

time.sleep()