Hadoop环境搭建（3）-- 伪分部部署

Hadoop环境搭建（3）-- 伪分部部署 一、部署环境

1、在hadoop目录下部署环境配置，ll查看

cd /opt/module/hadoop-3.1.3/etc/hadoop/

2、对这四个文件进行配置更改 ，将命令放到configuration标签中

（1）配置core-site.xml文件

命令：vi core-site.xml

fs.defaultFS
hdfs://hadoop100:9820




        hadoop.tmp.dir
        /opt/module/hadoop-3.1.3/data/tmp

（2）配置hdfs-site.xml

命令：vi hdfs-site.xml

        dfs.replication
        1

（3）配置yarn-site.xml

命令：vi yarn-site.xml

yarn.nodemanager.aux-services
mapreduce_shuffle



yarn.resourcemanager.hostname
hadoop100

 
  yarn.nodemanager.env-whitelist        
JAVA_HOME,HADOOP_COMMON_HOME,HADOOP_HDFS_HOME,
HADOOP_CONF_DIR,CLASSPATH_PREPEND_DISTCACHE,HADOOP_YARN_HOME,HADOOP_MAPRED_HOME
 

（4）配置mapred-site.xml

命令：vi mapred-site.xml

                mapreduce.framework.name
                yarn

二、启动

1、 格式化NameNode（第一次启动时格式化，以后就不要总格式化）格式化命令： 

hdfs namenode –format

2、启动NameNode和DataNode，命令：

hdfs --daemon start namenode
hdfs --daemon start datanode

3、启动resourcemanager和nodemanager，命令：

yarn --daemon start resourcemanager
yarn --daemon start nodemanager

4、输入jps查看java进程

 有时候可能会遇到无法启动的问题，再输入一次启动命令应该就可以了，如果还不行应该就是vi文件配置错误，进行修改就可以了。

5、kill杀掉进程

kill 进程号