使用Python requests_html执行JavaScript函数

Question

我正在尝试使用Python的requests_html在会话中执行JavaScript函数（单击按钮单击），

我了解常规requests library没有Javascript支持，所以我正在尝试改用request_html。

这是我所拥有的（使用请求）：

s = requests.Session()
r = s.post(url)
print(r.text)
r2 = s.post(url2)
print(r2.text)

url是包含按钮的页面的链接，url2是帖子请求链接链接link the按钮的JavaScript函数执行。 （我在浏览器检查器中通过“网络”选项卡找到了url2，并单击按钮作为测试）

但是，这是行不通的，我从r2.Text：

<h2>Error(500): An error occurred.</h2>
                <p>We are sorry but an unexpected error has occurred on our side while handling your request. In the meantime, please retry your request or try the following:</p>

据我了解，错误500意味着问题是服务器端，而不是客户端。但是，在网页上手动单击按钮可以正常工作。

这使我试图直接执行JavaScript函数。我在requests_html文档上找不到任何东西。我也看过硒，但这似乎并非最新。

还值得一提的是，按钮检查器看起来像这样：＆lt; button onClick =“ registerInterest（72833,959320000，''）“ type =“ button” class =“ btn btn btn btn-primary”＆gt; class =“ far fa-clipboard”＆gt;＆lt;/i＆gt;注册利息＆lt;/button＆gt;

本质上，我想执行registerInterest（72833,959320000，'''）在我的第一个发布请求之后。

任何帮助将不胜感激， 我将很乐意提供任何其他需要的信息。

Answer 1

您需要使用硒来操纵HTML元素。您可以使用这样的代码：

from selenium import webdriver
#set chromodriver.exe path
driver = webdriver.Chrome(executable_path="C:\\chromedriver.exe")
#implicit wait
driver.implicitly_wait(0.5)
#maximize browser
driver.maximize_window()
#launch URL
driver.get("https://www.tutorialspoint.com/index.htm")
#identify element
l =driver.find_element_by_xpath("//button[text()='Check it Now']")
#perform click
l.click()
print("Page title is: ")
print(driver.title)
#close browser
driver.quit()

只需检查有关硒方法的文档，然后找到适合您最好的方法。