黑猴子的家:Hive查询之 JOIN 语句

1、等值JOIN

Hive支持通常的SQL JOIN语句,但是只支持等值连接,不支持非等值连接。

案例

根据员工表和部门表中的部门编号相等,查询员工编号、员工名称和部门编号;

hive (default)> select e.empno, e.ename, d.deptno, d.dname from emp e 
join dept d on e.deptno = d.deptno;

2、表的别名

合并员工表和部门表

hive (default)> select e.empno, e.ename, d.deptno from emp e 
join dept d on e.deptno = d.deptno;

尖叫提示:使用别名可以简化查询,而且使用表名前缀可以提高执行效率。

3、内连接(INNER JOIN)

内连接:只有进行连接的两个表中都存在与连接条件相匹配的数据才会被保留下来。

hive (default)> select e.empno, e.ename, d.deptno from emp e 
join dept d on e.deptno = d.deptno;

4、左外连接(LEFT OUTER JOIN)

左外连接:JOIN操作符左边表中符合WHERE子句的所有记录将会被返回。

hive (default)> select e.empno, e.ename, d.deptno from emp e left 
join dept d on e.deptno = d.deptno;

5、右外连接(RIGHT OUTER JOIN)

右外连接:JOIN操作符右边表中符合WHERE子句的所有记录将会被返回。

hive (default)> select e.empno, e.ename, d.deptno from emp e 
right join dept d on e.deptno = d.deptno;

6、满外连接(FULL OUTER JOIN)

满外连接:将会返回所有表中符合WHERE语句条件的所有记录。如果任一表的指定字段没有符合条件的值的话,那么就使用NULL值替代。

hive (default)> select e.empno, e.ename, d.deptno from emp e 
full join dept d on e.deptno = d.deptno;

7、多表连接

1)准备数据 location.txt

1700    Beijing
1800    London
1900    Tokyo

2)创建位置表

hive (default)>  create table if not exists default.location(
loc int,
loc_name string
)
row format delimited fields terminated by '\t';

3)导入数据

hive (default)> load data local inpath '/opt/module/datas/location.txt' 
into table default.location;

4)多表连接查询

hive (default)> select e.ename, d.deptno, l. loc_name from  emp e 
join  dept d
on   d.deptno = e.deptno 
join  location l
on   d.loc = l.loc;

尖叫提示:大多数情况下,Hive会对每对JOIN连接对象启动一个MapReduce任务。本例中会首先启动一个MapReduce job对表e和表d进行连接操作,然后会再启动一个MapReduce job将第一个MapReduce job的输出和表l;进行连接操作。

为什么不是表d和表l先进行连接操作呢?这是因为Hive总是按照从左到右的顺序执行的,而且连接 n个表,至少需要n-1个连接条件。例如:连接三个表,至少需要两个连接条件。

8、笛卡尔积 JOIN

案例

hive (default)> select empno, deptno from emp, dept;
FAILED: SemanticException Column deptno Found in more than One Tables/Subqueries

尖叫提示:笛卡尔集会在下面条件下产生
(1)省略连接条件
(2)连接条件无效
(3)所有表中的所有行互相连接

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • Hive是什么? Hive是一种基于Hadoop的数据库技术并提供完整的sql查询功能, . HIVE能做什么? ...
    日出卡尔阅读 7,641评论 0 0
  • 1.Hive原理 Hive是构建在Hadoop上的数据仓库软件框架,支持使用SQL来读,写和管理大规模数据集合。H...
    samjinzhang阅读 12,219评论 0 22
  • Hive 是基于Hadoop 构建的一套数据仓库分析系统,它提供了丰富的SQL查询方式来分析存储在Hadoop 分...
    三万_chenbing阅读 14,160评论 0 10
  • 时间:2017-08-16 19:36:53来源:CSDN Hive 是基于Hadoop 构建的一套数据仓库分析系...
    majyer阅读 5,313评论 0 2
  • 台湾美眉的笑有矜持的,可爱的,傲娇的,自信的,噻(撒)乃(娇)的,很少有这种笑到没有形象的。眼前的姑娘梳着利...
    达恩阅读 1,514评论 0 0