MapReduce常见问题

1.   空指针异常         2.  exception

in thread “main” java.lang.UnsatisfiedLinkError:

org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z:

上面两个问题是因为缺少组件,下载winutils.exehadoop.dll到本地;在windows下配置hadoop

环境变量:HADOOP_HOME=E:\hadoop-2.7.3

                PATH:%HADOOP_HOME%\bin

把下载下来的两个个文件拷贝到C:\windows\system32目录下和HADOOP_HOME目录的bin目录下

3.   报一串数字的异常

winutils.exe缺少运行环境,在cmd运行一下winutils.exe看是否可以正常运行,安装vc++2015可以解决。

4.   jdk版本导致String数组越界

64位操作系统,安装32位jdk,hadoop64位会报奇怪的String数组越界,重新安装64位jdk解决

5. 使用IDEA操作HDFS时,需要在工程中resource下的Hadoop配置文件中配置成虚拟机中的Ubuntu系统ip

©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,951评论 19 139
  • 1. Java基础部分 基础部分的顺序:基本语法,类相关的语法,内部类的语法,继承相关的语法,异常的语法,线程的语...
    子非鱼_t_阅读 31,766评论 18 399
  • 今天开始复习一下排序,其实这个最近都有再捡起来练,毕竟太久远拿起来还挺不容易的。简单说一下——自己复习排序的时候理...
    AceCream佳阅读 1,298评论 2 7
  • 今天周日,随张家人一起回老家上坟。往年我很少回去,因为以前的心境总觉得他们没有抚养过我,我压根就觉得他们和我没有关...
    任小艺阅读 336评论 0 1
  • 用正确的姿势听英文歌(你假如在其他地方读过,那也是我写的。) 基本式 「学长,请问怎样才能把英语练得和你一样棒?」...
    Edger阅读 16,899评论 101 790