大数据技术选型

数据采集传输

负责处理文件日志的：Flume
消息队列：Kafka
数据抽取：Sqoop、DataX

数据存储

MySql、HDFS、Hbase、Redis、MongoDB

数据计算

Hive、Tez、Spark、Flink

数据查询

Presto、Druid、Impala、Kylin

数据可视化

Echarts、QuickBI

任务调度

Azkaban、Oozie

集群监控

Zabbix

元数据管理

Atals

数据质量监控工具

Griffin

数据压力测试工具

jmeter

©著作权归作者所有,转载或内容合作请联系作者
平台声明：文章内容（如有图片或视频亦包括在内）由作者上传并发布，文章内容仅代表作者本人观点，简书系信息发布平台，仅提供信息存储服务。