一、实验目的
熟悉hdfs命令行基本操作
二、实验环境
Windows 10
VMware Workstation Pro虚拟机
Hadoop环境
Jdk1.8
三、实验内容
1:hdfs常见命令:
(1)查看帮助:hdfs dfs -help
(2)查看当前目录信息:hdfs dfs -ls /
(3)创建文件夹:hdfs dfs -mkdir /文件夹名
(4)上传文件:hdfs dfs -put /本地路径 /hdfs路径
(5)下载文件到本地:hdfs dfs -get /hdfs路径 /本地路径
(6)移动hdfs文件:hdfs dfs -mv /hdfs路径 /hdfs路径
(7)复制hdfs文件:hdfs dfs -cp /hdfs路径 /hdfs路径
(8)删除hdfs文件:hdfs dfs -rm /文件名
(9)删除hdfs文件夹:hdfs dfs -rm -r /文件夹名
(10)查看hdfs中的文件:hdfs dfs -cat /文件名
(11)查看文件夹中有多少个文件:hdfs dfs -count /文件夹名
(12)统计目录下的对象数:hdfs dfs -count /文件夹名
(13)统计目录下的对象大小:hdfs dfs -du [-s] [-h] /文件夹名
(14)显示hdfs的容量、数据块和数据节点的信息:hdfs dfsadmin -report
安全模式是hadoop的一种保护机制,用于保证集群中的数据块的安全性。当hdfs进入安全模式时不允许客户端进行任何修改文件的操作,包括上传文件,删除文件,重命名,创建文件夹等操作。
(15)查看安全模式状态:hdfs dfsadmin -safemode get
(16)强制进入安全模式:hdfs dfsadmin -safemode enter
(17)强制离开安全模式:hdfs dfsadmin -safemode leave
hdfs常见命令运行:
(1)查看帮助:hdfs dfs -help
(2)查看当前目录信息:hdfs dfs -ls /
(3)创建文件夹hdfsTest:hdfs dfs -mkdir /hdfsTest
(4)把本地路径为/home/hadoop/rg34/input.txt的文件上传到hdfs文件系统路径为/hdfsTest/hdfsFile1的目录下:hdfs dfs -put /home/hadoop/rg3 4/input.txt /hdfsTest/hdfsFile1
(5)下载路径为/hdfsTest/hdfsFile1/input.txt的hdfs文件到本地/home/hadoop/linusTest目录下:hdfs dfs -get /hdfsTest/hdfsFile1/ input.txt /home/hadoop/linusTest
(6)把路径为/hdfsTest/hdfsFile1/input.txt的hdfs文件移动到/hdfsTest/hdfsFile2下:hdfs dfs -mv /hdfsTest/hdfsFile1/input.txt /hdfsTest/hdfsFile2
(7)复制一份路径为/hdfsTest/hdfsFile2/input.txt的hdfs文件到路径为/hdfsTest/hdfsFile1目录下:hdfs dfs -cp /hdfsTest/hdfsFile2/input. Txt /hdfsTest/hdfsFile1
(8)删除路径为/hdfsTest/hdfsFile1/input.txt的hdfs文件:hdfs dfs -rm /hdfsTest/hdfsFile1/input.txt
(9)删除路径为/hdfsTest/hdfsFile1的hdfs文件夹:hdfs dfs -rm -r /hdfsTest/hdfsFile1
(10)查看路径为/hdfsTest/hdfsFile2/input.txt的hdfs文件:hdfs dfs -cat /hdfsTest/hdfsFile2/input.txt
(11)查看hdfsTest文件夹中有多少个文件:hdfs dfs -count /hdfsTest
(数字2表示有两个文件夹,数据1表示有1个文件)
(12)统计某目录下的对象数:hdfs dfs -count /
(13)统计某目录下的对象大小:hdfs dfs -du [-s] [-h] /
(14)显示hdfs的容量、数据块和数据节点的信息: hdfs dfsadmin -report
安全模式是hadoop的一种保护机制,用于保证集群中的数据块的安全性。当hdfs进入安全模式时不允许客户端进行任何修改文件的操作,包括上传文件,删除文件,重命名,创建文件夹等操作。
(15)查看安全模式状态:hdfs dfsadmin -safemode get
(16)强制进入安全模式:hdfs dfsadmin -safemode enter
(17)强制离开安全模式:hdfs dfsadmin -safemode leave