26-SparkStreaming02

用户行为日志

信令数据

cell

mapWithState

DStream 整合RDD == transform

数据一:日志信息    DStream

domain,traffic

ruozedata.com

ruozedata.com

baidu.com

数据二:已有的文件  黑名单  RDD

domain

baidu.com

==> 

(ruozedata.com, ruozedata.com,8888)

www.ruozedata.com,8888

www.ruozedata.com,6666

www.baidu.com,7777


www.yy.com 


test.yy.com 


create table wc(

word varchar(20),

c int(10)

zidong,zidong,i,love,you,ymy,say

bonecp

word count time

ruoze 10    201809092130

ruoze 9    201809092131

upsert

©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容