什么是HDFSShell？HDFS常用命令操作方法

1、1 shell 在計(jì)算機(jī)科學(xué)中俗稱 “ 殼” ，給使用者使用界面的進(jìn)行與系統(tǒng)交互的軟件，通過(guò)接收用戶輸入的命令執(zhí)行相應(yīng)的操作，shell 分為圖形界面 shell 和命令行式shell。hdfsshell 包含類似 shell 的命令，示例如下：hadoopfs hadoopdfs hdfsdfs 上述命令中， “hadoopfs”使用面最廣，可以操作任何文件系統(tǒng)，如本地系統(tǒng)、hdfs等，“ hadoopdfs”則主要針對(duì) hdfs 文件系統(tǒng)，已經(jīng)被 “ hdfsdfs”代替。文件系統(tǒng)（ fs ）shell 包含了各種的類 shell 的命令，可以直接與hadoop 分布式文件系統(tǒng)以及其他文件

2、系統(tǒng)進(jìn)行交互，如與localfs、httpfs 、s3fs文件系統(tǒng)交互等。通過(guò)命令行的進(jìn)行交互，具體操作常用命令，如表1 所示。表 1hdfsshell 參數(shù)命令參數(shù)功能描述-ls 查看指定路徑的目錄結(jié)構(gòu)-du 統(tǒng)計(jì)目錄下所有文件小-mv 文件-cp 復(fù)制文件-rm 刪除文件 / 空白文件夾-put 上傳文件-cat 查看文件內(nèi)容-text 將源文件輸出為文本格式-mkdir 創(chuàng)建空白文件夾-help 幫助從表 3-1 可以看出， hdfs 支持的命令行很多，但這里只列舉常用的一部分，如果需要了解全部命令或使用過(guò)程中遇到問(wèn)題都可以使用“hadoopfshelp ”命令獲取幫助文檔，也可以通過(guò)h

3、adoop 文檔：/docs/stable/hadoop-project-dist/hadoop-mon/filesystemshell.html學(xué)習(xí)，接下來(lái)對(duì)這些常用的命令進(jìn)行操作演示。1ls 命令ls 命令用于查看指定路徑的當(dāng)前目錄結(jié)構(gòu)，類似于linux 系統(tǒng)中的 ls 命令，其語(yǔ)法格式如下：2 hadoopfs ls-d-h-r 其中，各項(xiàng)參數(shù)說(shuō)明如下：l-d：將目錄顯示為普通文件。l-h：使用便于操作人員讀取的單位信息格式。l-r：遞歸顯示所有子目錄的信息。示例代碼如下：$hadoopfs-ls/上述示例代碼，執(zhí)行完成后會(huì)展示hdfs 根目

4、錄下的所有文件及文件夾，如圖1所示。圖 1ls 命令2mkdir命令mkdir 命令用于在指定路徑下創(chuàng)建子目錄，其中創(chuàng)建的路徑可以采用uri 格式進(jìn)行指定，與 linux 命令 mkdir 相同，可以創(chuàng)建多級(jí)目錄，其語(yǔ)法格式如下：hadoopfs mkdir-p 其中-p 參數(shù)表示創(chuàng)建子目錄使先檢查路徑否存在，如果不存在，則創(chuàng)建相應(yīng)的各級(jí)目錄。示例代碼如下：$hadoopfs-mkdir-p/itcast/hadoop上述示例代碼，在hdfs 系統(tǒng)的根目錄下創(chuàng)建 “itcast/hadoop”層級(jí)文件夾， “ -p” 參數(shù)表示遞歸創(chuàng)建路徑中的各級(jí)目錄。執(zhí)行命令后如圖2 所示。3 圖 2mkdir 命令3put 命令put 命令用于將本地系統(tǒng)的文件或文件夾復(fù)制到hdfs 系統(tǒng)上去，其語(yǔ)法格式如下：hadoopfs-put-f-p其中各項(xiàng)說(shuō)明如下：-f：覆蓋目標(biāo)文件 -p：保留訪問(wèn)和時(shí)間、權(quán)限示例