hadoop程序不能联接,Hadoop程序越更新

hadoopword count程序运行错误1。用hadoop的时候都是在linux上运行的，没有出现这个问题，远程连接到配置单元时出错:hadoopisnotallowedToImpersonatehadoop使用beeline或DbVisualizer远程连接到配置单元时出错，错误信息为:hadoopisnotallowedToImpersonatehadoophive server 2，需要在hadoop的配置文件中配置Proxyuser，并检查hadoop的配置文件中coresite.xml文件是否正确。

1:shuffle error:ExceededMAX _ FAILED _ UNIQUE _ FETCHES；BailingOUTANSWER: 程序有很多文件要打开分析。一般系统默认的数字是1024，足够正常使用(用ulimita可以看到)，但是对于程序来说太少了。修改方法:修改2个文件。/etc/security/limits . conf VI/etc/security/limits . conf add:* soft no $ CD/etc/PAM . d/$ sudovilogin add session required/lib/security/PAM _ limits .所以我更正第一个问题的答案:这是在reduce预处理阶段的shuffle过程中未能获得超过上限的完整地图输出造成的。

NameNode节点已关闭，无法访问hadoop cluster。NameNode是hdfs集群的主节点。NameNode在关闭时无法访问hadoop cluster。Hadoop是由Apache基金会开发的分布式系统基础设施。用户可以在不了解底层细节的情况下开发分布式程序。

这部分信息我也不太了解。说了一些我知道的，供楼主参考，我就当是建议了。相信楼主都知道hadoop的文件系统叫hdfs，是hadoop distributed分布式文件系统的中文缩写。该系统是Google GFS的开源实现。让我们回答问题。首先是节点故障:google在他们的gfs论文中说，google曾经说过，在使用gfs的时候，google遇到过各种各样的问题，主要包括:application 程序bug、操作系统bug、人为错误，甚至硬盘、内存、连接器、网络、电源故障。

hadoop的hdfs需要考虑这些问题。然后是备份恢复的处理:备份恢复因为我没有做过，但是我可以给楼主提供一个方法实验。楼主可以先搭建一个只有三个datanode的小集群，设置数据备份为2。首先，清除现有数据，然后在其中一个datanodes上上传数据。默认情况下，hadoop将在上载数据的DataNode中保存数据备份。

HADOOP无法在WINDOWS上运行。图片只是Eclipse在WINDOWS上的开发客户端。你说的有很多可能性。首先是配置。单机、伪集群、集群的配置都不一样。从图片上看，您的HDFS配置应该是成功的。请仔细检查MAPRED的配置，或者贴出来。检查主机、配置文件、*ENV等的配置。如果还是解决不了问题，请查看HADOOP目录/logs中各个组件的日志记录，看是否有异常信息。

使用配置单元的beeline或DbVisualizer远程模式连接到配置单元时出错。错误信息为:hadoopisnotallowedToimpersonatehadoophive server 2添加了权限控制。您需要在hadoop的配置文件中配置Proxyuser。检查coresite.xml文件是否正确配置了hadoop的配置文件中的Proxyuser。

1，用hadoop的时候，都是在linux上运行，没有出现这个问题。2.但是我在用nutch在window上开发的时候遇到了这个问题，主要和hadoop和nutch在cygwin上运行时的权限有关。只需更改hadoopcore.jar包中的一个方法即可。

1。准备工作1.1在win7中找到一个目录解压hadoop2.6.0就是D:\ yangimm \ code \ study \hadoop\hadoop2 . 6 . 0(以下简称$HADOOP_HOME) 1.2在win7中添加几个环境变量HADOOP _ HOME:\ yangimm \ code \ study \hadoop\binhadoop _ prefix:\ yanjimm \ code \ study \hadoop\hadoop2 . 6 . 0另外末尾追加了PATH变量；%HADOOP_HOME%\bin II，eclipse远程调试1.1下载hadoopeclipse pluginhadoopeclipse plugin是一个专门用于eclipse的hadoop plugin，可以直接在IDE环境下查看hdfs的目录和文件内容。