eclipse中搭建hadoop环境

PS: 之前装的eclipse是oxygen的版本比较新,没有找到合适的插件,这里选择了2.5 的版本,配合Juno SR2版的eclipse是可以用的

IDE:Eclipse Java EE IDE for Web Developers【Version: Juno Service Release 2】
下载win-64
下载Mac Cocoa x64
下载linux-x64
Hadoop版本:hadoop2.5.2

1.下载hadoop-2.5.2.tar.gz
链接: https://pan.baidu.com/s/1mhNnzSW 密码: n3g5
2.下载hadoop-eclipse-plugin-2.5.2.jar
链接: https://pan.baidu.com/s/1jIiWqKu 密码: jn2t
手动编译其他版本插件教程

将hadoop-eclipse-plugin-2.5.2.jar复制到eclipse安装目录下的plugins目录下,如: C:\Program Files\eclipse\j2ee-juno\eclipse\plugins
复制完成后重启eclipse,选择菜单window>>preferences,就会出现Hadoop Map/Reduce的插件如下图所示。

这里选择hadoop-2.5.2.tar.gz解压出来的那个文件夹

选择菜单window>>show view打开Map/Reduce的视图,然后右键New Hadoop Location


配置主节点的主机(IP)和端口

HOST这里填的是master是主机名,你也可以直接填主节点的IP地址,如果本地hosts文件里面已经配置了映射,就可以像我这么直接写主机名

启动集群之后,刷新DFS Location


查看的集群上的文件系统

可以先在集群上的文件系统上新建一个目录,再刷新,可以看到文件系统是同步的

©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

  • Hadoop的编程可以是在Linux环境或Winows环境中,在此以Windows环境为示例,以Eclipse工具...
    欢醉阅读 5,345评论 0 28
  • hadoop是什么?HDFS与MapReduceHive:数据仓库,在HDFS之上,后台执行,帮你执行。faceb...
    Babus阅读 7,267评论 0 5
  • Spring Boot 参考指南 介绍 转载自:https://www.gitbook.com/book/qbgb...
    毛宇鹏阅读 47,158评论 6 342
  • 看到题目有没有一种高大上的感觉?毛线,当前是个人、是个公司都在说自己搞大数据,每天没有几个PB的数据入库,每天没有...
    丁小晶的晶小丁阅读 10,014评论 0 50
  • 相同的地域总能嗅出不同的气息 趁年轻,多走一走、看一看、学一学 让心学会呼吸和过滤 树立正确的观念,身心并行 心态...
    董懿柠阅读 1,306评论 0 1

友情链接更多精彩内容