hadoop常用命令使用2

hadoop常用命令主要內(nèi)容2

掌握Hadoop的常用命令3一.

掌握Hadoop的常用命令4一、

掌握Hadoop的常用命令FSShell調(diào)用文件系統(tǒng)(FS)Shell命令應(yīng)使用bin/hadoopfs<args>的形式。所有的的FSshell命令使用URI路徑作為參數(shù)。URI格式是scheme://authority/path。對(duì)HDFS文件系統(tǒng)scheme是hdfs，對(duì)本地文件系統(tǒng)，scheme是file。其中scheme和authority參數(shù)都是可選的，如果未加指定，就會(huì)使用配置中指定的默認(rèn)scheme。一個(gè)HDFS文件或目錄比如/parent/child可以表示成hdfs://namenode:namenodeport/parent/child，或者更簡單的/parent/child（假設(shè)你配置文件中的默認(rèn)值是namenode:namenodeport）。大多數(shù)FSShell命令的行為和對(duì)應(yīng)的UnixShell命令類似，不同之處會(huì)在下面介紹各命令使用詳情時(shí)指出。出錯(cuò)信息會(huì)輸出到stderr，其他信息輸出到stdout。5一、

掌握Hadoop的常用命令cat使用方法：hadoopfs-catURI[URI…]將路徑指定文件的內(nèi)容輸出到stdout。示例：hadoopfs-cathdfs://host1:port1/file1hdfs://host2:port2/file2hadoopfs-catfile:///file3/user/hadoop/file4返回值：成功返回0，失敗返回-1。6一、

掌握Hadoop的常用命令chgrp使用方法：hadoopfs-chgrp[-R]GROUPURI[URI…]Changegroupassociationoffiles.With-R,makethechangerecursivelythroughthedirectorystructure.Theusermustbetheowneroffiles,orelseasuper-user.AdditionalinformationisinthePermissionsUserGuide.-->改變文件所屬的組。使用-R將使改變?cè)谀夸浗Y(jié)構(gòu)下遞歸進(jìn)行。命令的使用者必須是文件的所有者或者超級(jí)用戶。更多的信息請(qǐng)參見HDFS權(quán)限用戶指南。7一、

掌握Hadoop的常用命令chmod使用方法：hadoopfs-chmod[-R]<MODE[,MODE]...|OCTALMODE>URI[URI…]改變文件的權(quán)限。使用-R將使改變?cè)谀夸浗Y(jié)構(gòu)下遞歸進(jìn)行。命令的使用者必須是文件的所有者或者超級(jí)用戶。更多的信息請(qǐng)參見HDFS權(quán)限用戶指南。chown使用方法：hadoopfs-chown[-R][OWNER][:[GROUP]]URI[URI]改變文件的擁有者。使用-R將使改變?cè)谀夸浗Y(jié)構(gòu)下遞歸進(jìn)行。命令的使用者必須是超級(jí)用戶。更多的信息請(qǐng)參見HDFS權(quán)限用戶指南。8一、

掌握Hadoop的常用命令copyFromLocal使用方法：hadoopfs-copyFromLocal<localsrc>URI除了限定源路徑是一個(gè)本地文件外，和put命令相似。copyToLocal使用方法：hadoopfs-copyToLocal[-ignorecrc][-crc]URI<localdst>除了限定目標(biāo)路徑是一個(gè)本地文件外，和get命令類似。9一、

掌握Hadoop的常用命令cp使用方法：hadoopfs-cpURI[URI…]<dest>將文件從源路徑復(fù)制到目標(biāo)路徑。這個(gè)命令允許有多個(gè)源路徑，此時(shí)目標(biāo)路徑必須是一個(gè)目錄。示例：hadoopfs-cp/user/hadoop/file1/user/hadoop/file2hadoopfs-cp/user/hadoop/file1/user/hadoop/file2/user/hadoop/dir返回值：成功返回0，失敗返回-1。10一、

掌握Hadoop的常用命令du使用方法：hadoopfs-duURI[URI…]顯示目錄中所有文件的大小，或者當(dāng)只指定一個(gè)文件時(shí)，顯示此文件的大小。示例：hadoopfs-d