微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

无法使用 requests-html 获取 javascript 插入的内容

如何解决无法使用 requests-html 获取 javascript 插入的内容

我正在尝试使用 requests-html 在 python 中编写一个程序,该程序定期从 http://192.168.3.66/ 抓取数据,并且能够点击开/关按钮。

我使用 requests-html 因为我想要的数据是由页面加载后运行的 javascript 代码生成的。

这是我的代码

import requests
from bs4 import BeautifulSoup
from requests_html import HTMLSession

session = HTMLSession()

url = "http://192.168.3.66/"

response = session.get(url)
response.html.render(timeout="20")

print(response.html.html)

它在 javascript 运行之前打印网页的 html,而不是实际出现在我的浏览器上的 html。

我想知道...

  • 如何让我的代码工作
  • 是否可以使用 requests-html 单击开/关按钮?如果没有,您建议我使用什么库/方法

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。