源码网 如何用python爬取ajax网页的内容？

如何用python爬取ajax网页的内容？

我直接看JS源代码，分析，然后爬。例如，如果我查看一个页面并使用Ajax请求一个JSON文件，我将首先爬升该页面以获取Ajax所需的参数，然后直接请求JSON页面，然后对其进行解码，然后处理数据并将其放入数据库。如果直接在页面上运行所有JS（就像浏览器那样），然后得到最终的htmldom树，性能非常差，因此不建议使用这种方法。因为Python和JS的性能非常差，如果这样做的话，会消耗大量的CPU资源，最终只能得到非常低的效率。

源码网 哪些网站不能爬 源码论坛

版权声明：本文内容由互联网用户自发贡献，本站不承担相关法律责任.如有侵权/违法内容,本站将立刻删除。