Hadoop离线数据分析平台实战——320会话分析
项目进度
| 模块名称 | 完成情况 |
|---|---|
| 用户基本信息分析(MR)� | 未完成 |
| 浏览器信息分析(MR) | 未完成 |
| 地域信息分析(MR) | 未完成 |
| 外链信息分析(MR) | 未完成 |
| 用户浏览深度分析(Hive) | 未完成 |
| 订单分析(Hive) | 未完成 |
| 事件分析(Hive) | 未完成 |
模块介绍
会话分析主要同时计算会话个数和会话长度，
主要应用在用户基本信息分析模块和浏览器信息分析模块这两部分。
会话个数就是计算u_sd的唯一个数，长度就是每个会话的长度总和。
计算规则
会话个数指的是计算所有u_sd的个数，
会话长度就是计算每个会话的长度，
然后计算这些长度的一个总值。
(注意：处理的数据为所有事件产生的数据)
最终数据保存：stats_user和stats_device_browser。
涉及到的列(除了维度列和created列外)：sessions, sessions_length。
涉及到其他表有dimension_platform、dimension_date、dimension_browser。
编码步骤
- 编写mapreduce程序
- 配置collector类和xml文件等信息。
- 测试
