2016 - 2024

感恩一路有你

java爬虫和python爬虫 如何用python爬取ajax网页的内容?

浏览量:1278 时间:2021-04-12 01:57:59 作者:admin

如何用python爬取ajax网页的内容?

我直接看JS源代码,分析,然后爬。例如,如果我查看一个页面并使用Ajax请求一个JSON文件,我将首先爬升该页面以获取Ajax所需的参数,然后直接请求JSON页面,然后对其进行解码,然后处理数据并将其放入数据库。如果直接在页面上运行所有JS(就像浏览器那样),然后得到最终的htmldom树,性能非常差,因此不建议使用这种方法。因为Python和JS的性能非常差,如果这样做的话,会消耗大量的CPU资源,最终只能得到非常低的效率。

java爬虫和python爬虫 java 爬虫怎样爬取网站数据

版权声明:本文内容由互联网用户自发贡献,本站不承担相关法律责任.如有侵权/违法内容,本站将立刻删除。