我正在尝试获取此网站表格中的数据,该网站在页面加载后通过jquery更新(我有权限)：
我目前使用selenium和beautifulsoup来获取数据,但是因为这些数据在html源代码中不可见,所以我无法访问它.我试过PyQt4但它同样没有获得更新的html源代码.
这些值在firebug和chrome开发人员中可见,所以有没有任何python包可以利用它并将其提供给beautifulsoup？
我不是一个庞大的技术人员,所以我想要一个可以在Python或下一个最简单的软件类型中运行的解决方案.
我知道我可以通过专有的“屏幕刮板”软件获得它,但这很昂贵.
解决方法:
Page正在进行AJAX调用以获取到http://whichchart.com/service.php?action=NewcastleCoal的数据,该数据返回JSON中的值.所以你可以做到以下几点：
>使用urllib使用HTTP获取数据
>使用json库读取方法解析该数据
>现在你有一个要处理的python对象
如果您需要处理HTML页面内容,我建议使用像BeautifulSoup或scrapy这样的库
版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 dio@foxmail.com 举报，一经查实，本站将立刻删除。
