java 大数据 如何用JAVA获取html网页中我所需要的数据?

如何用JAVA获取html网页中我所需要的数据?一般网页(至少我们公司是)的翻页功能如下:1。JS从服务器请求JSON数据,传递给服务器的参数包括page和count。2. JS根据JSON将HTML

如何用JAVA获取html网页中我所需要的数据?

一般网页(至少我们公司是)的翻页功能如下:

1。JS从服务器请求JSON数据,传递给服务器的参数包括page和count。

2. JS根据JSON将HTML输出到元素。如果您要抓取的网页是这种形式,可以打开浏览器的URL请求跟踪功能,获取JS与服务器交互的URL和参数。JSON页面,并继续解析数据。当然,如果网页采用非异步翻页模式,而不是使用JSON通信,但是每次服务器生成新页面时,可能需要解析HTML并获取数据,但本质上还是上面的粗体:获取与服务器交互的URL并请求数据。我希望我能说清楚。他们都说沟通是一个技能点,答案似乎从来没有被点亮过…

JAVA怎么收集并处理实时数据?

你可以连接到数据库,其中一个使用时间戳来移动和存储当前时间。阅读时,可以选择最近一天的数据