Hadoop安装与配置问题说明

Hadoop安装与配置问题说明

说明：本博客对Hadoop安装与配置过程中可能存在的问题做简单记录

---

启动Hadoop

hadoop@ubuntu16:/usr/local/java/hadoop/hadoop-2.7.1$ ./sbin/start-all.sh
This script is Deprecated. Instead use start-dfs.sh and start-yarn.sh

启动Hadoop时，建议使用./sbin/start-dfs.sh（版本：hadoop2.7.1）

---

启动 web 端查看 HDFS 文件系统

启动 web 端查看 HDFS 文件系统需确保以下步骤以完成

1. 启动hadoop节点。DataNode、NameNode……

   hadoop@ubuntu16:/usr/local/java/hadoop/hadoop-2.7.1$ jps
   5138 DataNode
   6019 NodeManager
   6054 Jps
   5015 NameNode
   5321 SecondaryNameNode
   5902 ResourceManager
   

2. 输入正确的端口号。hadoop3.x端口号为9870；hadoop2.x端口号是50070

---

hadoop未找到命令

hadoop@ubuntu16:/data$ hadoop fs -ls /
hadoop：未找到命令

添加hadoop到环境变量

sudo vim /etc/profile
export PATH=$PATH:/usr/local/hadoop/bin # 最后一行添加
source /etc/profile # 使修改后的文件生效
hadoop version