hadoop

hadoop

安装VM和centos

1.安装vm15蓝屏  （版本和电脑不兼容）

        下载vm16

2.centos，单独放在一个文件夹中

修改主机名，IP，映射

1.hostname  （hostnamectl  set-hostname  主机名）

2.vi /etc/hostname（重启）

（二）IP修改：vi /etc/sysconfig/network-scripts/ifcfg-ens33

1.修改为静态获取IP

BOOTPROTO="static"

2.添加IP地址

IPADDR=192.168.1.100

3.添加网关

GATEWAY=192.168.1.2

4.添加子网掩码

NETMASK=255.255.255.0

5.添加域名解析器

DNS1=192.168.1.2

（三）映射

vi /etc/hosts

网络配置

1.虚拟机

2.windows电脑（遇到电脑没有vmnet8的下载CCleaner，清理注册表，重置虚拟机网络）

3.调整防火墙（建议关闭防火墙-

1.查看防火墙状态systemctl status firewalld-

2.关闭防火墙systemctl stop firewalld-

3.开机防火墙不启动systemctl disable firewalld

4.ping IP地址{1.ping外部IP网址。

         2.ping 百度网址

5.重启网络：service network restart

链接moba

jdk、hadoop部署

1.在opt下面创建software，module两个文件夹

2.安装jdk

3.安装hadoop

4.伪分布部署

5.克隆虚拟机

6.完全分布式部署

1.免密

2.修改环境变量

3.（修改配置文件-hadoop-env.sh  hdfa-site.xml  yarn-site.xml  mapred-site.xml）

4.集群分发scp-r 用户名主机名： 地址  

5.格式化namenode（rm -rf data  rm -rf logs）hdfs namenode -format  

6.单启，群启）

hive配置

1.安装mysql

2.安装hive

3.修改配置环境

4.启动