Hadoop的伪分布式部署

Hadoop的伪分布式部署

一，配置集群环境

     1.修改第一个配置

在此目录下：

cd /opt/module/hadoop-3.1.3/etc/hadoop

  设置hadoop-env.sh文件

  命令：

vi hadoop-env.sh

并修改成：export JAVA_HOME=/opt/module/jdk1.8.0_212

2.修改第二个配置

在此目录下

cd /opt/module/hadoop-3.1.3/etc/hadoop

设置core-site.xml文件

命令：

vi core-site.xml

添加文件：

    
        fs.defaultFS
 hdfs://hadoop100:9820



    
        hadoop.data.dir
        /opt/module/hadoop-3.1.3/data
    

 

3.修改第三个配置

 在此目录下

cd /opt/module/hadoop-3.1.3/etc/hadoop

设置hdfs-site.xml文件

命令：

vi hdfs-site.xml

在configuration中指定HDFS的数量

        dfs.replication

        1

4.启动集群

先格式化namenode

命令：

Hdfs namenode -format

再启动namenode

命令：

hdfs --daemon start