位置:首頁 > 大數據教學 > Hadoop教學 > Hadoop命令參考

Hadoop命令參考

在“$HADOOP_HOME/bin/hadoop fs” 裡有更多的命令。./bin/hadoop DFS 列出所有可以使用在FsShell係統上運行的命令。此外,$HADOOP_HOME/bin/hadoop fs -help 命令名稱會顯示一個簡短的用法。

所有表的操作如下所示。以下是使用參數一般方式:

"<path>" means any file or directory name. 
"<path>..." means one or more file or directory names. 
"<file>" means any filename. 
"<src>" and "<dest>" are path names in a directed operation. 
"<localSrc>" and "<localDest>" are paths as above, but on the local file system. 

所有其他文件和路徑名是指HDFS內部的對象。

1.

ls <path>

列出路徑指定的目錄中的內容,示出了名稱,權限,擁有者,大小和修改日期的每個條目。

2.

lsr <path>

行為類似於-ls,但遞歸顯示路徑的所有子目錄項。

3.

du <path>

顯示磁盤使用率,以字節為單位,對所有的文件,這些文件匹配的路徑;文件名報告使用完整HDFS協議前綴。

4.

dus <path>

類似-du,但打印路徑中的所有文件/目錄的磁盤使用情況的摘要。

5.

mv <src><dest>

通過移動表示src到dest,在HDFS的文件或目錄。

6.

cp <src> <dest>

在HDFS複製確定src中的文件或目錄到dest。

7.

rm <path>

刪除文件或路徑標識的空目錄。

8.

rmr <path>

刪除路徑標識的文件或目錄。遞歸刪除所有子條目(例如,文件或路徑的子目錄)。

9.

put <localSrc> <dest>

從本地localSrc文件係統中的DFS標識文件或目錄內複製到dest。

10.

copyFromLocal <localSrc> <dest>

等同於-put

11.

moveFromLocal <localSrc> <dest>

從標識 localSrc本地文件係統中的文件或目錄中HDFS複製到dest,然後刪除本地副本上成功。

12.

get [-crc] <src> <localDest>

拷貝標識 src 來確定localDest本地文件係統路徑HDFS文件或目錄。

13.

getmerge <src> <localDest>

檢索匹配的路徑的src HDFS中的所有文件,並將它們複製合並文件到標識localDest本地文件係統中

14.

cat <filen-ame>

顯示在標準輸出文件名的內容。

15.

copyToLocal <src> <localDest>

等同於 -get

16.

moveToLocal <src> <localDest>

工作方式類似於-get,但刪除HDFS複製成功。

17.

mkdir <path>

在創建一個HDFS命名的目錄路徑。

創建任何父目錄的路徑丟失(例如,命令mkdir-p在Linux中)。

18.

setrep [-R] [-w] rep <path>

設置標識路徑代表文件的目標文件複製因子。 (實際的複製因子會向著隨著時間的推移目標移動)

19.

touchz <path>

創建在路徑包含當前時間作為時間戳的文件。失敗如果文件已經存在於路徑,除非文件已經大小為0。

20.

test -[ezd] <path>

返回1,如果路徑存在;長度為零;或者是一個目錄,否則為0。

21.

stat [format] <path>

打印有關的路徑信息。格式是接受塊文件大小(%b),文件名(%n),塊大小(%o),複製(%r)和修改日期(%y,%Y)的字符串。

22.

tail [-f] <file2name>

顯示在標準輸出文件的最後1KB。

23.

chmod [-R] mode,mode,... <path>...

變化符合路徑標識的一個或多個對象關聯的文件權限....遞歸執行變更與R.模式是3位八進製模式,或{augo}+/-{rwxX}。假設如果冇有指定範圍,則不適用umask。

24.

chown [-R] [owner][:[group]] <path>...

設置擁有用戶和/或組標識路徑的文件或目錄....設置所有者遞歸,如果指定-R。

25.

chgrp [-R] group <path>...

設置所屬組標識路徑的文件或目錄....設置組遞歸,如果指定-R。

26.

help <cmd-name>

返回使用上麵列出的命令之一信息。必須省略了'-' 字符在cmd。