微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

没有在 zillow 网站和其他网站上的 devtools 中获取所有 html 数据

如何解决没有在 zillow 网站和其他网站上的 devtools 中获取所有 html 数据

我正在尝试从 zillow 中抓取房地产数据。我在devtool上查看HTML代码时,大部分房屋详情的链接都没有显示HTML代码中。而我们单击每个房屋卡片以获取相关房屋的详细信息。 我在 devtool 的控制台中收到这些错误和警告:

New York City NY Single Family Homes

搜索解决这些问题的方法,但没有找到解决方法。禁用 JavaScript 源映射只会隐藏警告。我检查了 chrome 是否更新。 我正在使用 beautifulsoup 来抓取数据,并尝试将它与 selenium 结合起来。但我仍然得到 40 个房屋详细信息链接中 31 个的空值。

如果您有任何可以提供帮助的想法,我提前感谢您。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。