2016 - 2024

感恩一路有你

kafka manager使用说明 mesos属于大数据计算平台的哪类组件?

浏览量:4830 时间:2023-04-04 17:42:28 作者:采采

mesos属于大数据计算平台的哪类组件?

首先,一个典型的大数据解决方案,即大数据系统平台的构建,涉及多个层面,如数据采集传输、数据存储、数据计算、资源管理、任务调度等。在每个流程阶段,都有多个组件可供选择,关键是满足实际需求。举一些简单的例子来说明一些典型的组件:

文件存储:Hadoop HDFS离线计算:Hadoop MapReduce、Spark streaming、实时计算:Storm、Spark Streaming K-V、NOSQL数据库:HBase、Redis、MongoDB资源管理:YARN、Mesos日志收集:Flume、Scribe、Logstash和Kibana消息系统:Kafka、StormMQ、ZeroMQ和RabbitMQ查询分析:Hive、Impala、Presto、Phoenix、SparkSQL、Flink、Kylin和Druid分布式协调服务:Zookeeper集群管理和监控:Ambari、Ganglia、Nagios

管理 系统 组件 资源

版权声明:本文内容由互联网用户自发贡献,本站不承担相关法律责任.如有侵权/违法内容,本站将立刻删除。