Как нажать кнопку на сайте, парсинг?

Пишу телеграмм бота который сможет скидывать пачки анекдотов сгенерированных нейросетью на сайте "https://randstuff.ru/joke/". Одну шутку достать с сайта получается легко. Но мне бы хотелось достать 10 анекдотов для использования в коде. На сайте есть кнопка "Сгенерировать", при нажатии на которую текст анекдота меняется. Подскажите пожалуйста, как мне автоматически нажимать эту кнопку?
Код:
import requests
from bs4 import BeautifulSoup as b
URL = 'https://randstuff.ru/joke/fav/'
r = requests.get(URL)
soup = b(r.text, 'html.parser')
anekdots = []
for i in range(10):
anekdot = soup.find_all('td')
anekdots.append(anekdot)
#здесь я и хочу добавить нажатие на кнопку "сгенерировать"

PS: я в таких делах ещё совсем совсем новичок, поэтому извините если это глупый вопрос. Заранее спасибо!

Дополнительно:

Содержание

1 Дополнительно:
2 Ответы:

А в пользовании интернетом вы тоже новичок?
по запросу "питон нажать кнопку на сайте" вам поисковики вообще ничего не находят?
или вы даже не пытались?

Фрагменты кода надо размещать в виде текста и оборачивать тэгом code для корректного отображения. Удобно делать кнопкой </>
Это обязательно, см.п.3.8 Регламента.
Сюда же относится traceback, ввод и вывод в консоли и другая структурированная текстовая инфа.
Исправьте вопрос.

Ответы:

import requests s=requests.session() s.headers={"X-Requested-With": "XMLHttpRequest"} joke_text = s.post("https://randstuff.ru/joke/generate/").json()["joke"]["text"] print(joke_text)

1	import requests s=requests.session() s.headers={"X-Requested-With": "XMLHttpRequest"} joke_text = s.post("https://randstuff.ru/joke/generate/").json()["joke"]["text"] print(joke_text)

Через инструменты разработчика смотрите какой запрос отсылается на сервер и повторяйте
Там обычный POST на этот же адрес и внятный ответ в JSON

На сайте нет никакого антипарсинга, т. е. нет смысла заморачиваться с нажатием кнопки.
Просто сделайте с заголовком 'X-Requested-With': 'XMLHttpRequest

import http.client  conn = http.client.HTTPSConnection("randstuff.ru") payload = '' headers = {   'X-Requested-With': 'XMLHttpRequest' } conn.request("POST", "/joke/generate/", payload, headers) res = conn.getresponse() data = res.read() print(data.decode("utf-8"))

1	import http.client conn = http.client.HTTPSConnection("randstuff.ru") payload = '' headers = { 'X-Requested-With': 'XMLHttpRequest' } conn.request("POST", "/joke/generate/", payload, headers) res = conn.getresponse() data = res.read() print(data.decode("utf-8"))

+ Заказать

Для решения данной проблемы вы можете воспользоваться услугами фрилансеров. Мы выполним необходимую работу быстро и качественно.

Есть ответ
07.04.2024

Ответить

Для автоматизации действий на сайте, таких как нажатие кнопки, можно использовать технику парсинга веб-страниц. В этом случае мы можем использовать язык программирования PHP с помощью библиотеки cURL.

Прежде всего, нам необходимо загрузить страницу, на которой находится кнопка, которую мы хотим нажать. Для этого используем функцию cURL:

$url = 'http://www.example.com';
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
$output = curl_exec($ch);
curl_close($ch);

1

2

3

4

5

6

$url = 'http://www.example.com';

$ch = curl_init();

curl_setopt($ch, CURLOPT_URL, $url);

curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);

$output = curl_exec($ch);

curl_close($ch);

После того как мы загрузили страницу, нам нужно найти кнопку, которую мы хотим нажать. Для этого можно воспользоваться библиотекой PHP Simple HTML DOM Parser:

include('simple_html_dom.php');
$html = str_get_html($output);
$button = $html->find('button#button_id', 0); // здесь button_id - идентификатор кнопки

1

2

3

include('simple_html_dom.php');

$html = str_get_html($output);

$button = $html->find('button#button_id', 0); // здесь button_id - идентификатор кнопки

Теперь, когда у нас есть кнопка, мы можем смоделировать нажатие на нее, отправив POST-запрос на URL, который обрабатывает это действие. Для этого мы можем использовать функцию cURL:

$button_url = 'http://www.example.com/button_action.php'; // URL, который обрабатывает нажатие кнопки
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $button_url);
curl_setopt($ch, CURLOPT_POST, 1);
curl_setopt($ch, CURLOPT_POSTFIELDS, http_build_query(['button_param' => 'value'])); // параметры кнопки
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
$output = curl_exec($ch);
curl_close($ch);

1

2

3

4

5

6

7

8

$button_url = 'http://www.example.com/button_action.php'; // URL, который обрабатывает нажатие кнопки

$ch = curl_init();

curl_setopt($ch, CURLOPT_URL, $button_url);

curl_setopt($ch, CURLOPT_POST, 1);

curl_setopt($ch, CURLOPT_POSTFIELDS, http_build_query(['button_param' => 'value'])); // параметры кнопки

curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);

$output = curl_exec($ch);

curl_close($ch);

Таким образом, мы можем автоматизировать нажатие кнопки на веб-странице с помощью PHP и парсинга. Убедитесь, что вы имеете право на использование парсинга веб-страниц и следите за правилами сайта, на котором вы выполняете действия.

Как нажать кнопку на сайте, парсинг?

Дополнительно:

Ответы:

Оставить комментарий Отменить

Ответы

Ежедневно, круглосуточно

Как нажать кнопку на сайте, парсинг?

Дополнительно:

Ответы:

Оставить комментарий Отменить

Ответы

Метки

Ежедневно, круглосуточно