天天看点

hadoop 2.7.3 集群搭建遇到问题以及解决

系统安装相关

center os安装到系统中需要用软碟通制作一个启动盘,先选择一个镜像,然在在启动菜单选择写入硬盘

出现错误 center os 7 starting timeout报了一长溜后出现dev/root dosnot exist

start-all.sh报错:ssh: could not resolve hostname master: temporary failure in name resolution

答:请确保各配置文件里的三台机器的host名没有填错,包括/etc/hosts core-site.xml hdfs-site.xml mapred-site.xml 这几个文件都要排查

datanode节点没有起来,查看日志发现是/user/hadoop/dfs/data 文件路径不存在

答:请确保hdfs-site.xml里面的name为dfs.datanode.data.dir所对应的value路径目录文件夹已创建

datanode节点没有起来,查看节点日志文件发现是对该文件夹没有权限,无法操作

答:chown -r hadoop:hadoop /usr/hadoop 给三个节点的改目录赋该权限给hadoop群组的hadoop用户

cannot create file/business1/2017-08-02/15/.logs.1501660021526.tmp. name node is in safe mode.

答:表示目前是安全模式,值要退出安全模式就可以了hadoop dfsadmin -safemode leave

dataxceiver error processing write_block operation