Hadoop分布式文件系統(tǒng)——HDFS編程實(shí)踐之常用命令和Web界面

1、Hadoop分布式文件系統(tǒng)HDFS編程實(shí)踐之常用命令和Web界面2 本文來(lái)自：大數(shù)據(jù)技術(shù)原理與應(yīng)用（第2版）概念、存儲(chǔ)、處理、分析與應(yīng)用 作 者：林子雨 出版社：人民郵電出版社 版權(quán)說(shuō)明 若作者對(duì)本資料使用持有異議，請(qǐng)及時(shí)聯(lián)系本網(wǎng)站，我們將在第一時(shí)間妥善處理。23HDFS編程實(shí)踐Hadoop提供了關(guān)于HDFS在Linux操作系統(tǒng)上進(jìn)行文件操作的常用Shell命令以及Java API。同時(shí)還可以利用Web界面查看和管理Hadoop文件系統(tǒng)。注意，Hadoop安裝成功后，已經(jīng)包含HDFS和MapReduce，不需要額外安裝。而HBase等其他組件，則需要另外下載安裝。4HDFS常用命令在進(jìn)行HDF

2、S編程實(shí)踐前，需要啟動(dòng)Hadoop。執(zhí)行如下命令：HDFS的Shell命令統(tǒng)一格式：hadoop command genericOptions commandOptions51.HDFS常用命令 HDFS有很多shell命令，其中，fs命令可以說(shuō)是HDFS最常用的命令 利用該命令可以查看HDFS文件系統(tǒng)的目錄結(jié)構(gòu)、上傳和下載數(shù)據(jù)、創(chuàng)建文件等。該命令的用法為：hadoop fs genericOptions commandOptions 注：Hadoop中有三種Shell命令方式： hadoop fs 適用于任何不同的文件系統(tǒng)，比如本地文件系統(tǒng)和HDFS文件系統(tǒng) hadoop dfs 只能適用于

3、HDFS文件系統(tǒng) hdfs dfs 跟hadoop dfs的命令作用一樣，也只能適用于HDFS文件系統(tǒng)61.HDFS常用命令實(shí)例：hadoop fs -ls :顯示指定的文件的詳細(xì)信息hadoop fs -mkdir :創(chuàng)建指定的文件夾71.HDFS常用命令實(shí)例：hadoop fs -cat 將指定的文件的內(nèi)容輸出到標(biāo)準(zhǔn)輸出（stdout）hadoop fs -copyFromLocal 將本地源文件復(fù)制到路徑指定的文件或文件夾中81.HDFS常用命令實(shí)例：92.HDFS的Web界面 在配置好Hadoop集群之后，可以通過(guò)瀏覽器登錄“http:/NameNodeIP:50070”訪(fǎng)問(wèn)HDFS文件系統(tǒng)通過(guò)Web界面的“Browse the filesystem”查看文件“hdfs: