好文档就是一把金锄头!
欢迎来到金锄头文库![会员中心]
电子文档交易市场
安卓APP | ios版本
电子文档交易市场
安卓APP | ios版本

大讲台筛选,Hadoop安装端口被占用解决方法.docx

5页
  • 卖家[上传人]:1980****057
  • 文档编号:273880738
  • 上传时间:2022-04-07
  • 文档格式:DOCX
  • 文档大小:12.32KB
  • / 5 举报 版权申诉 马上下载
  • 文本预览
  • 下载提示
  • 常见问题
    • 大讲台筛选,Hadoop安装端口被占用解决方法 大讲台筛选,Hadoop安装端口被占用解决方法 在测试安装hadoop的时候,通常会遇到大家在同一批机器上安装hadoop的情况,这样的话会有端口已经被占用导致安装不成功的情况出现 Hadoop日志会提示这种错误: ERROR org.apache.hadoop.mapred.TaskTracker: Can not start task tracker because .BindException: Address already in use 在这种情况下,大讲台专业Hadoop培训最好的方法就是在配置环境时把所有的端口配置都进行修改 在hadoop 0.20版本会涉及到3个配置文件: core-site.xml: 1: 2: 3: hdfs://master:9100 4: 5: 为默认hdfs文件访问URI 6: 7: hdfs-site.xml 1: 2: dfs.datanode.address 3: 0.0.0.0:50011 4: 5: 默认为50010, 是datanode的监听端口 6: 7: 8: 9: dfs.datanode.http.address 10: 0.0.0.0:50076 11: 12: 默认为50075,为datanode的http server端口 13: 14: 15: 16: dfs.datanode.ipc.address 17: 0.0.0.0:50021 18: 19: 默认为50020, 为datanode的ipc server端口 20: 21: mapred-site.xml 1: 2: mapred.job.tracker 3: master:9101 4: 5: job tracker运行的位置和端口 6: 7: 8: 9: 10: mapred.task.tracker.http.address 11: 0.0.0.0:50061 12: 13: 默认为50061, 是task tracker的http server端口 14: 15: 以上端口都配置为和其他人不冲突的端口,然后启动hadoop就可以顺利启动了。

      PS: 1:如果遇到这种错误: ERROR org.apache.hadoop.mapred.TaskTracker: Can not start task tracker because org.apache.hadoop.ipc.RemoteException: java.io.IOException: Unknown protocol to name node: org.apache.hadoop.mapred.InterTrackerProtoco 说明你在core-site.xml中 的端口和mapred-site.xml中mapred.job.tracker中端口配置为完全相同的了,请修改为不同端口 2:如果遇到这种: error: node.SafeModeException: Cannot delete /tmp/hadoop-*/mapred/system. Name node is in safe mode. 请不要急,NameNode会在开始启动阶段自动关闭安全模式,然后启动成功如果你不想等待,可以运行: bin/hadoop dfsadmin -safemode leave 强制结束。

      解释:安全模式 NameNode启动时会从fsimage和edits日志文件中装载文件系统的状态信息,接着它等待各个DataNode向它报告它们各自的数据块状态,这样,NameNode 就不会过早地开始复制数据块,即使在副本充足的情况下这个阶段,NameNode 处于安全模式下大讲台,专业Hadoop培训NameNode的安全模式本质上是HDFS集群的一种只读模式,此时集群不允许任何对文件系统或者数据块修改的操作通常NameNode会在开始阶段自动地退出安全模式如果需要,你也可以通过’bin/hadoop dfsadmin -safemode’命令显式地将HDFS置于安全模式NameNode首页会显示当前是否处于安全模式关于安全模式的更多介绍和配置信息请参考JavaDoc:setSafeMode()。

      点击阅读更多内容
      关于金锄头网 - 版权申诉 - 免责声明 - 诚邀英才 - 联系我们
      手机版 | 川公网安备 51140202000112号 | 经营许可证(蜀ICP备13022795号)
      ©2008-2016 by Sichuan Goldhoe Inc. All Rights Reserved.