2016 - 2024

感恩一路有你

kafka实时流处理 大家都用storm做什么业务?

浏览量:2291 时间:2021-03-11 16:36:05 作者:admin

大家都用storm做什么业务?

Apache storm主要用于实时数据流处理或实时计算服务,如

1。用户行为日志具有准事实查询的需求。使用flume将日志文件发送到Kafka后,可以使用storm进行实时消费,从日志中解析出所需字段信息,并根据hive表定义的结构实时写入HDFS,从而可以实时查询hive表。

2. 实时计算,如信息流的实时推荐,当用户刷新时,可以向Kafka发送请求消息,用storm对这些请求进行处理,将用户的个性化结果汇总存储在redis中,供用户下次显示。

3. storm还可以实现一些实时统计功能。

kafka实时流处理 kafka实时数据同步 mysql实时同步到kafka

版权声明:本文内容由互联网用户自发贡献,本站不承担相关法律责任.如有侵权/违法内容,本站将立刻删除。