当前位置: 代码迷 >> 综合 >> Hadoop 遇到的【坑】
  详细解决方案

Hadoop 遇到的【坑】

热度:90   发布时间:2023-09-30 05:02:18.0

1.在3.x中,改变了namenode的http端口号(由原来的2.x的50070改成了9870)。

2.同样在3.x中,改变了2.x的slaves文件,在3.x中变成了workers文件(在$HADOOP_HOME/etc/hadoop/.)

3. 在3.x中,配置好了NN(NameNode)的HA(High Availability,官网写的是这个,居然还看到某网上有人写High Available),之后正常启动,但是当Active NN 挂掉之后,处于Standby状态的NN不自动切换。需要在自己的fencing配置文件中(hdfs-site.xml)文件,配置私钥文件,并且赋予其用户的权限。

scp命令:scp [file] / -r [folder] n2:`pwd` 与主机相同的目录下

4.以上错有问题,都是由于忽略了版本问题,所以,Apach官方网站上面的信息是最新,大爱官网。

所有的2.x和3.x的区别,请查看我的上一篇博客《Apache Hadoop 3.0.0 GA版正式发布,可以部署到线上》

  相关解决方案