电商数仓-用户行为数据采集平台

1.集群设计


集群部署示意图

2.日志采集flume部署

2.1  taildir source

2.2  kafka channel

3.kafka部署

4.数据消费flume部署

4.1 kafka source

4.2  file channel

4.3 hdfs sink

5.项目经验

©著作权归作者所有,转载或内容合作请联系作者
平台声明：文章内容（如有图片或视频亦包括在内）由作者上传并发布，文章内容仅代表作者本人观点，简书系信息发布平台，仅提供信息存储服务。