python爬取ajax异步加载 如何用python爬取ajax网页的内容?
浏览量:2889
时间:2021-03-12 17:46:49
作者:admin
如何用python爬取ajax网页的内容?
我直接看JS源代码,分析,然后爬。例如,如果我查看一个页面并使用Ajax请求一个JSON文件,我将首先爬升该页面以获取Ajax所需的参数,然后直接请求JSON页面,然后对其进行解码,然后处理数据并将其放入数据库。如果直接在页面上运行所有JS(就像浏览器那样),然后得到最终的htmldom树,性能非常差,因此不建议使用这种方法。因为Python和JS的性能非常差,如果这样做的话,会消耗大量的CPU资源,最终只能得到非常低的效率。
python爬取ajax异步加载 python爬取js动态网页 python爬取动态网页数据
版权声明:本文内容由互联网用户自发贡献,本站不承担相关法律责任.如有侵权/违法内容,本站将立刻删除。