Что именно будет если отключить SSL сертификат при парсинге?

Ссылка скопирована
0 ответов

По вводным: работал над кодом для парсера двух страниц:

1.

url_1 = f'https://steamcommunity.com/market/listings/{game}/{name}'

Пример:https://steamcommunity.com/market/listings/440/Man...

2.

url_2 = f"https://steamcommunity.com/market/itemordershistogram?country=NL&language=russian&currency=5&item_nameid={nameid}&two_factor=0"

Пример:
https://steamcommunity.com/market/itemordershistog...

По вводным: для работы использовал прокси из библиотеки proxybroker2 с настройками:

[("HTTP", ("Anonymous", "High")), ("HTTPS", ("Anonymous", "High"))]

Сейчас ситуация такая: но даже так иногда выпадают прокси с меньшей анонимностью, но это не к вопросу.

Сейчас ситуация такая: в конечном итоге на практике выяснил, что прокси могут дать 200 результат не с первой попытки, и поэтому обычно отвожу на 1 прокси по 3 попытки, после чего меняю прокси.

Сейчас ситуация такая: там же увидел эту часто повторяющуюся ошибку:

Cannot connect to host steamcommunity.com:443 ssl:True [SSLCertVerificationError: (1, '[SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: self signed certificate in certificate chain (_ssl.c:992)')]

По вводным: попроверял отключить SSL сертификат, в моем случае при использовании async используется параметрSsl=False.

По вводным: количество запросов с ответом!= 200 значительно снизилось. Приблизительно в 3 раза.
По вводным: если ранее на 1 успешный запрос приходилось ~18 провальных, то теперь порядка 6.

Нужно понять: в конечном счете вопрос: чем для меня, человека использующего пк в своей домашней сети, и делающего запрос только на 2 конечные точки, меняя лишь данные по типу имени и name_id, в запросе отправляющем 0 информации о каких-либо логинах паролях и прочих данных за исключением статично настроенных headers, а после принимающим обычный text и делая вычисления на его основах, опасно отключение SSL?

Сейчас ситуация такая: я вижу лишь призрачный сценарий того, что кто-то подменит данные на страницы так, чтобы мой код вызвал ошибку из-за другой структуры данных или подсчитал что-то неправильно.

По вводным: единственные опасения в целом возникают только к прокси, которые являются общедоступными, ведь именно через них я делаю запросы и отключаю SSL.

Сейчас ситуация такая: может знающий человек подсказать, чем в результате может закончиться моя история с таким подходом к парсингу, и не словами "это не безопасно", а конкретно чем? Я же не вирус себе скачаю через async withSession.get
Очень плох в этой теме, Буду признателен выслушать вас!

Нужно решить такую задачу?

Опишите проблему, и специалист поможет с настройкой, исправлением ошибки или доработкой сайта. Подберём понятный план работ без лишней переписки.

Заказать помощь
Другие ответы (0)

Пока нет других ответов. Будьте первым, кто поможет автору.

Ответить на вопрос

комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *

Вам также может быть интересно