分布式日志收集框架 日志采集系统flume和kafka有什么区别及联系?
浏览量:1666
时间:2021-03-31 11:15:30
作者:admin
日志采集系统flume和kafka有什么区别及联系?
flume和Kafka的一些功能是相同的,但总的来说,它们是完全不同的;它们的场景是不同的,但它们可以一起使用。
简而言之,flume是一个分布式日志收集系统,它从各种服务器收集日志并将其传输到指定的位置,如HDFS。
Kafka是一个分布式消息中间件,有自己的存储,提供推拉数据访问功能。
整个过程如下:
登录服务器<--flume-->kafka-->hdfs-->离线计算
登录服务器<--flume-->kafka-->storm
希望我的回答能对您有所帮助
想成为java高级程序员,需要掌握哪些技术?
分布式、设计模式、前端技术、网络支付、全文搜索引擎、docker、WebService等
详细可以到如鹏官方网站学习,那里有网络,你可以学习,随时提问,老师可以在线实时答疑。有技术大牛亲自授课,口碑好,基本上都很佩服。有新课程更新,也可以继续申请学习。
分布式日志收集框架 日志管理系统 java分布式日志收集推荐
版权声明:本文内容由互联网用户自发贡献,本站不承担相关法律责任.如有侵权/违法内容,本站将立刻删除。