Hadoop原理与技术——hdfs命令行基本操作

点击链接查看文档

一、实验目的
熟悉hdfs命令行基本操作
二、实验环境
Windows 10
VMware Workstation Pro虚拟机
Hadoop环境
Jdk1.8
三、实验内容
1：hdfs常见命令：
（1）查看帮助：hdfs dfs -help

（2）查看当前目录信息：hdfs dfs -ls /

（3）创建文件夹：hdfs dfs -mkdir /文件夹名

（4）上传文件：hdfs dfs -put /本地路径 /hdfs路径

（5）下载文件到本地：hdfs dfs -get /hdfs路径 /本地路径

（6）移动hdfs文件：hdfs dfs -mv /hdfs路径 /hdfs路径

（7）复制hdfs文件：hdfs dfs -cp /hdfs路径 /hdfs路径

（8）删除hdfs文件：hdfs dfs -rm /文件名

（9）删除hdfs文件夹：hdfs dfs -rm -r /文件夹名

（10）查看hdfs中的文件：hdfs dfs -cat /文件名

（11）查看文件夹中有多少个文件：hdfs dfs -count /文件夹名

（12）统计目录下的对象数：hdfs dfs -count /文件夹名

（13）统计目录下的对象大小：hdfs dfs -du [-s] [-h] /文件夹名

（14）显示hdfs的容量、数据块和数据节点的信息：hdfs dfsadmin -report

安全模式是hadoop的一种保护机制，用于保证集群中的数据块的安全性。当hdfs进入安全模式时不允许客户端进行任何修改文件的操作,包括上传文件，删除文件，重命名，创建文件夹等操作。

（15）查看安全模式状态：hdfs dfsadmin -safemode get

（16）强制进入安全模式：hdfs dfsadmin -safemode enter

（17）强制离开安全模式：hdfs dfsadmin -safemode leave

hdfs常见命令运行：

（1）查看帮助：hdfs dfs -help

（2）查看当前目录信息：hdfs dfs -ls /

（3）创建文件夹hdfsTest：hdfs dfs -mkdir /hdfsTest

（4）把本地路径为/home/hadoop/rg34/input.txt的文件上传到hdfs文件系统路径为/hdfsTest/hdfsFile1的目录下：hdfs dfs -put /home/hadoop/rg3 4/input.txt /hdfsTest/hdfsFile1

（5）下载路径为/hdfsTest/hdfsFile1/input.txt的hdfs文件到本地/home/hadoop/linusTest目录下：hdfs dfs -get /hdfsTest/hdfsFile1/ input.txt /home/hadoop/linusTest

（6）把路径为/hdfsTest/hdfsFile1/input.txt的hdfs文件移动到/hdfsTest/hdfsFile2下：hdfs dfs -mv /hdfsTest/hdfsFile1/input.txt /hdfsTest/hdfsFile2

（7）复制一份路径为/hdfsTest/hdfsFile2/input.txt的hdfs文件到路径为/hdfsTest/hdfsFile1目录下：hdfs dfs -cp /hdfsTest/hdfsFile2/input. Txt /hdfsTest/hdfsFile1

（8）删除路径为/hdfsTest/hdfsFile1/input.txt的hdfs文件：hdfs dfs -rm /hdfsTest/hdfsFile1/input.txt

（9）删除路径为/hdfsTest/hdfsFile1的hdfs文件夹：hdfs dfs -rm -r /hdfsTest/hdfsFile1

（10）查看路径为/hdfsTest/hdfsFile2/input.txt的hdfs文件：hdfs dfs -cat /hdfsTest/hdfsFile2/input.txt

（11）查看hdfsTest文件夹中有多少个文件：hdfs dfs -count /hdfsTest

（数字2表示有两个文件夹，数据1表示有1个文件）

（12）统计某目录下的对象数：hdfs dfs -count /

（13）统计某目录下的对象大小：hdfs dfs -du [-s] [-h] /

（14）显示hdfs的容量、数据块和数据节点的信息： hdfs dfsadmin -report

安全模式是hadoop的一种保护机制，用于保证集群中的数据块的安全性。当hdfs进入安全模式时不允许客户端进行任何修改文件的操作,包括上传文件，删除文件，重命名，创建文件夹等操作。

（15）查看安全模式状态：hdfs dfsadmin -safemode get

（16）强制进入安全模式：hdfs dfsadmin -safemode enter

（17）强制离开安全模式：hdfs dfsadmin -safemode leave