Hadoop集群环境搭建和熟悉常用的Linux *** 作

Hadoop集群环境搭建和熟悉常用的Linux *** 作,第1张

Hadoop集群环境搭建和熟悉常用的Linux *** 作

实验环境:
Centos7
Hadoop-3.3.0

0.安装Linux *** 作系统(虚拟机)
主机名:yannick_Master001

1.熟悉常用的Linux *** 作
1)cd命令:切换目录
(1)切换到目录“/usr/local”
(2)切换到当前目录的上一级目录
(3)切换到当前登录Linux系统的用户的自己的主文件

2)ls命令:查看文件与目录
查看目录“/usr”下的所有文件和目录

3)mkdir命令:新建目录
(1)进入“/tmp”目录,创建一个名为“a”的目录,并查看“/tmp”目录下已经存在哪些目录
(2)进入“/tmp”目录,创建目录“a1/a2/a3/a4”

4)rmdir命令:删除空的目录
(1)将上面创建的目录a(在“/tmp”目录下面)删除
(2)删除上面创建的目录“a1/a2/a3/a4” (在“/tmp”目录下面),然后查看“/tmp”目录下面存在哪些目录

5)cp命令:复制文件或目录
(1)将当前用户的主文件夹下的文件.bashrc复制到目录“/usr”下,并重命名为bashrc1
(2)在目录“/tmp”下新建目录test,再把这个目录复制到“/usr”目录下

6)mv命令:移动文件与目录,或更名
(1)将“/usr”目录下的文件bashrc1移动到“/usr/test”目录下
(2)将“/usr”目录下的test目录重命名为test2

7)rm命令:移除文件或目录
(1)将“/usr/test2”目录下的bashrc1文件删除
(2)将“/usr”目录下的test2目录删除

8)cat命令:查看文件内容
查看当前用户主文件夹下的.bashrc文件内容

9)tac命令:反向查看文件内容
反向查看当前用户主文件夹下的.bashrc文件的内容

10)more命令:一页一页翻动查看
翻页查看当前用户主文件夹下的.bashrc文件的内容

11)head命令:取出前面几行
(1)查看当前用户主文件夹下.bashrc文件内容前20行
(2)查看当前用户主文件夹下.bashrc文件内容,后面50行不显示,只显示前面几行

12)tail命令:取出后面几行
(1)查看当前用户主文件夹下.bashrc文件内容最后20行
(2)查看当前用户主文件夹下.bashrc文件内容,并且只列出50行以后的数据

13)touch命令:修改文件时间或创建新文件
(1)在“/tmp”目录下创建一个空文件hello,并查看文件时间
(2)修改hello文件,将文件时间整为5天前

14)chown命令:修改文件所有者权限
将hello文件所有者改为root帐号,并查看属性

15)find命令:文件查找
找出主文件夹下文件名为.bashrc的文件

16)tar命令:压缩命令
(1)在根目录“/”下新建文件夹test,然后在根目录“/”下打包成test.tar.gz

(2)把上面的test.tar.gz压缩包,解压缩到“/tmp”目录

2.安装Hadoop
(1)根据个人电脑条件选择安装伪分布式模式或者分布式模式
(2)给出Linux环境变量配置

(3)给出Hadoop配置文件配置详细清单
配置文件:
1.core-site.xml

2.hdfs-site.xml

执行 NameNode 的格式化成功!

(4)给出Hadoop启动后,各个节点进程截图,浏览器总览截图

3.熟悉基本的Hadoop hdfs *** 作
(1)使用hadoop用户登录Linux系统,启动Hadoop(Hadoop的安装目录为“/home/software/hadoop”),为hadoop用户在HDFS中创建用户目录“/user/hadoop”

(2)接着在HDFS的目录“/user/hadoop”下,创建test文件夹,并查看文件列表

(3)将Linux系统本地的“~/.bashrc”文件上传到HDFS的test文件夹中,并查看test

(4)将HDFS文件夹test复制到Linux系统本地文件系统的“/usr/local/hadoop”目录下

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zaji/5700156.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-12-17
下一篇 2022-12-17

发表评论

登录后才能评论

评论列表(0条)

保存