微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

用python抓取元素

如何解决用python抓取元素

我目前正在使用漂亮的汤来尝试并在网站上抓取数据,但是python模块正在读取页面的源代码。在页面的源代码中,我所需的信息不存在,但是如果我右键单击chrome中的页面检查元素是否存在。

我想知道python模块是否有办法从网页上抓取元素,而不是从源代码抓取

在漂亮的汤中,香港专业教育学院试图搜索类似的元素,但是它们只是没有出现或出现,因为它在源代码中进行了搜索。我也不确定为什么或为什么它不出现在那里。

解决方法

通过JavaScript加载内容时,无法通过 Beautiful Soup 获取数据。在这种情况下,使用 Selenium 库是因为它更有用且更方便地提取所需的动态内容。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。