hadoop中怎么创建文件夹?

从fs -ls从列出来的文件看，这个文件夹/user/root/input是通过root用户创建的。说明你在从本地文件系统拷贝input目录到hdfs系统的时候，不是采用的hadoop用户，而是用root用户执行的拷贝命令，你可能忘记切换用户了，可以删除现在的input目录(采用root用户运行hadoop的删除命令，或者不删除也没关系)，重新使用hadoop用户把input导入到hdfs系统中试试看。

frostfish425说的是对的！/user/hadoop是安装目录，就是说你hadoop相关的配置和代码都是放在这个位置，这个你自己定就可以了，但是要注意你配置文件和环境变量中的相关配置都要相应的发生改变。而/tmp/hadoop-hadoop/dfs/name是你配置的hdfs目录，也就是数据存放目录，在hdfs-site.xml中配置的，当然你也可以改变这个目录！

这个目录挂载的磁盘要足够大，不然数据存放不下，你初始化的时候报的这个Storage directory /tmp/hadoop-hadoop/dfs/name has been successfully formatted其实就是在/tmp/hadoop-hadoop/dfs这个目录下创建了name目录，意思就是告诉你，数据存放目录已经创建成功了！

从安装Hadoop 单机版的配置说起

在这里配置了Hadoop的文件目录

1. 启动Hadoop 并上传文件

上传文件命令：hadoop fs -put hadoop-2.9.2.tar.gz hdfs://hdgroup01:9000/

可以看到已经上传了文件了

2. 删除本地文件

如果删除后你在浏览器刷新页面 然后还能下载 说明 肯定存在其他地方

使用命令下载也可以：hadoop fs -get hdfs://hdgroup01:9000/hadoop-2.9.2.tar.gz

3. hdfs 文件存放的位置

通过查看 安装时配置的hadoop文件目录 上传文件后的结果

这个dfs 应该见过的 就是在格式化namenode的时候 在我们配置的文件中创建了dfs 文件夹

4. 上传一个349.5M 的文件

5. 进到hadoop 本地存储文件中查看 存储格式

上传的文件为349.47M 被切分成了 三块 因为是单机版 所以都存放到了 这台主机的文件系统中

可以看到 hadoop 块大小为128M（默认） 超过128M的文件会被切成不同的块存放

总结

1. hdfs是是通过分布式集群来存储文件，为客户端提供了一个便捷的访问方式 虚拟的目录结构

2. 文件存储到hdfs集群中的时候是被切分成block的 默认为128M

3. 文件的block 存放在若干台datanode节点中

4. hdfs文件系统中的文件与真实的block之间有映射关系，由namenode管理

5. 每个block 在集群中会存储多个副本，好处是可以提高数据的可靠性，还可以提高访问的吞吐量。

搭建Hadoop集群时，在安装并修改配置文件后，使用命令行start-dfs.sh启动Hadoop的HDFS文件系统。

然后在各节点输入jps查看集群的各节点进程，发现SecondaryNameNode没有正常启动。

查看 *** 作日志，可发现错误报告如下：

后查看hadoop文件夹下的data和name文件夹里面的current/version，发现clusterID不一致.

错误原因：

多次错误初始化NameNode，导致namenode和datanode的namespaceID和clusterID不一致。

解决方法：

1、删除Hadoop文件夹.../tmp/dfs 里面的data和name文件夹

2、初始化NameNode：hdfs namenode -format

3、启动HDFS：start-dfs.sh

此时再输入jps，可看到所有进程都正常启动

总结:

有异常，可通过查看 *** 作日志查找错误原因

初始化namenode之前，应先删除data和name文件夹。

---