使用Maven创建Hadoop工程

操作系统:Ubuntu

环境要求:JDK

Maven简介

可以通过一小段描述信息来管理项目的构建,报告和文档的软件项目管理工具,其使用起来十分便捷,公司项目采用Maven的比例越来越大。

如何安装、配置

下载并解压

Maven的官方下地址为:http://maven.apache.org/download.cgi
点击进入后选择apache-maven-3.5.2-bin.tar.gz(我的版本),然后点击下载。
然后对其进行解压并重命名(个人解压到~/下)

tar -zxvf apache-maven-3.5.2-bin.tar.gz -C ~/
cd ~/
mv apache-maven-3.5.2-bin.tar.gz maven

更改源(换为阿里的源)

更改为阿里的源可以使其更快速的运行。
然后通过文件进入到计算机/xxx/maven/conf 目录下。以gedit方式打开settings.xml,找到下图蓝色部分,将其注释。

所需更改

注释后添加(阿里的源):

<mirror>
        <id>nexus-aliyun</id>
        <mirrorOf>*</mirrorOf >
        <name>nexus aliyun</name>
        <url>http://maven.aliyun.com/nexus/content/groups/public</url>
</mirror>

创建项目并配置

先打开IDEA,点击create new project,配置好JDK

创建工程

GroupID是项目组织的唯一标识符,实际对应JAVA包的结构,ArtfactID是项目的唯一标识符。

ID填写

然后就会出现初始界面,这时选择File下的Settings

settings设置

此时就可以在xml下通过几行代码来插入各种jar包了,现在演示导入hadoop的所有jar包,hadoop需要hadoop-commond与Hadoop HDFS,我们一般通过maven repository来看怎么写导入的xml
maven repository官网:http://mvnrepository.com

打开网页搜索所需
进入后点击所需版本号
复制Maven代码
返回进行项目配置

使用同样方法对Hadoop HDFS进行导入,然后进入src下的java目录创建class并编写代码,就可以愉快的进行hadoop的操作,以后对于hbase的操作也和这个差不多。大家自己摸索着进行学习。

Crape Diem

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 135,463评论 19 139
  • Spring Boot 参考指南 介绍 转载自:https://www.gitbook.com/book/qbgb...
    毛宇鹏阅读 47,070评论 6 342
  • Android 自定义View的各种姿势1 Activity的显示之ViewRootImpl详解 Activity...
    passiontim阅读 175,625评论 25 709
  • 尝试着不再联系 却忍不住不停的想念 是罪给我下了套 套着我不怨挣扎 不愿解开 只是不再去刻意留意 却止不住思绪乱飞...
    我淑阅读 1,761评论 0 0
  • “乔万尼要是吻我就好了。” 这本书第一句就开门见山,导出了一个中年失婚美国女人欲望的躁动。 她不甘于相夫教子的平淡...
    谜样男人阅读 4,629评论 0 0