数据采集传输
负责处理文件日志的:Flume
消息队列:Kafka
数据抽取:Sqoop、DataX
数据存储
MySql、HDFS、Hbase、Redis、MongoDB
数据计算
Hive、Tez、Spark、Flink
数据查询
Presto、Druid、Impala、Kylin
数据可视化
Echarts、QuickBI
任务调度
Azkaban、Oozie
集群监控
Zabbix
元数据管理
Atals
数据质量监控工具
Griffin
数据压力测试工具
jmeter