没有在 zillow 网站和其他网站上的 devtools 中获取所有 html 数据

问题描述

我正在尝试从 zillow 中抓取房地产数据。我在devtool上查看HTML代码时,大部分房屋详情的链接都没有显示HTML代码中。而我们单击每个房屋卡片以获取相关房屋的详细信息。 我在 devtool 的控制台中收到这些错误和警告:

New York City NY Single Family Homes

搜索解决这些问题的方法,但没有找到解决方法。禁用 JavaScript 源映射只会隐藏警告。我检查了 chrome 是否更新。 我正在使用 beautifulsoup 来抓取数据,并尝试将它与 selenium 结合起来。但我仍然得到 40 个房屋详细信息链接中 31 个的空值。

如果您有任何可以提供帮助的想法,我提前感谢您。

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)