python爬虫菜鸟教程 如何用python爬取网页中隐藏的div内容？

如何用python爬取网页中隐藏的div内容？

这是在JS中实现的。因此，下面的内容实际上是动态生成的，web爬虫会抓取静态页面。至于解决方案，互联网上有几种方法：一种是使用自动化测试工具，如selenium，它可以模拟点击和其他操作，但这实际上与爬虫程序有很大不同。

第二种方法是使用特定的类库在后端调用JS。Python有，但我不懂Java。

第三是找到相关页面的JS代码，分析相关请求URL，直接调整新URL，但是一般JS是加密压缩的，但是可以试试。

python爬虫菜鸟教程 怎么用python爬数据 python怎么爬取网站数据

版权声明：本文内容由互联网用户自发贡献，本站不承担相关法律责任.如有侵权/违法内容,本站将立刻删除。