hive笔记

su hdfs
cd ~
cd rim_drtdb/
ls
---sql2hivemonth.sh //按月执行
---sql2hive.sh //按天执行
---sql2hiveweek.sh //按周执行
---error/ //错误日志文件夹，记录粗略
---gjd_log/  //日志文件夹，记录详细

import：生产机云pos MRTDB 抽取到 hive
export：hive 导出到 DRTDB中

如果哪天的脚步报错了，需要手动执行脚本，数据不会重复插入

最后编辑于 ：
©著作权归作者所有,转载或内容合作请联系作者
平台声明：文章内容（如有图片或视频亦包括在内）由作者上传并发布，文章内容仅代表作者本人观点，简书系信息发布平台，仅提供信息存储服务。

推荐阅读更多精彩内容

  • Hive笔记3-分区
    hive中表分区 Hive中的表分区比较简单，就是将同一组数据放到同一个HDFS目录下，当查询中过滤条件指定了某一...
    raincoffee阅读 2,144评论 0赞 1
  • Hive笔记6-hive元数据表结构详解
    hive系列之六-hive元数据表结构详解 Hive自己维护了一套元数据，用户通过HQL查询时候，Hive首先需要...
    raincoffee阅读 1,209评论 0赞 4
  • Hive笔记-bucket介绍
    hive-bucket介绍 http://blog.csdn.net/yfkiss/article/details...
    raincoffee阅读 1,539评论 0赞 0
  • Hive笔记7-Sampling
    Hive系列之七-Sampling 在Hive中提供了数据取样（SAMPLING）的功能，用来从Hive表中根据一...
    raincoffee阅读 2,925评论 0赞 2
  • Hive笔记4-加载数据
    Hive加载数据 在Hive中建好表之后，需要将数据加载进来，以便做后续查询分析，本文介绍向Hive表中加载数据的...
    raincoffee阅读 507评论 0赞 1