2016 - 2024

感恩一路有你

linux查看kafka状态 怎么查看logstash发送到kafka上的数据?

浏览量:1707 时间:2021-03-11 13:45:30 作者:admin

怎么查看logstash发送到kafka上的数据?

在output->elasticsearch下添加一个索引以配置output{elasticsearch{hosts=>[“192.168.10.166:9200”]index=>“testsystemLog”}}要查看它,请安装kibana。在kibana的settings->indexes页面上,在页面的输入框中输入test。

日志采集系统flume和kafka有什么区别及联系?

flume和Kafka的一些功能是相同的,但总体上是不同的;它们的场景不同,但可以一起使用。

简而言之,flume是一个分布式日志收集系统,它从各种服务器收集日志并将其传输到指定的位置,如HDFS。

Kafka是一个分布式消息中间件,有自己的存储,提供推拉数据访问功能。

整个过程如下:

登录服务器<--flume-->kafka-->hdfs-->离线计算

登录服务器<--flume-->kafka-->storm

希望我的回答能对您有所帮助

如何搭建kafka?该如何学习kafka?

很多百度

linux查看kafka状态 kafka删除积压数据 kafka查询有没有某条数据

版权声明:本文内容由互联网用户自发贡献,本站不承担相关法律责任.如有侵权/违法内容,本站将立刻删除。