大數(shù)據(jù)之---hadoop常用命令大全終極篇-創(chuàng)新互聯(lián)

軟件環(huán)境

創(chuàng)新互聯(lián)建站專注于企業(yè)網(wǎng)絡(luò)營(yíng)銷推廣、網(wǎng)站重做改版、榕江網(wǎng)站定制設(shè)計(jì)、自適應(yīng)品牌網(wǎng)站建設(shè)、H5高端網(wǎng)站建設(shè)、成都做商城網(wǎng)站、集團(tuán)公司官網(wǎng)建設(shè)、外貿(mào)網(wǎng)站制作、高端網(wǎng)站制作、響應(yīng)式網(wǎng)頁(yè)設(shè)計(jì)等建站業(yè)務(wù)，價(jià)格優(yōu)惠性價(jià)比高，為榕江等各大城市提供網(wǎng)站開(kāi)發(fā)制作服務(wù)。

RHEL6.8	hadoop2.8.1	apache-maven-3.3.9
findbugs-1.3.9	protobuf-2.5.0.tar.gz	jdk-8u45

(操作環(huán)境root安裝啟動(dòng)的hadoop)
hadoop fs == hdfs dfs

將文件上傳至hadoop的根目錄/下載至本地
hadoop dfs -put filename /????
hadoop dfs -get /filename???
# '/'不是Linux的根目錄，表示hadoop的根目錄
?
上傳文件?? 下載
[root@hadoop01 software]# hdfs dfs -put apache-maven-3.3.9-bin.zip? /
[root@hadoop01 software]# hdfs? dfs -ls?? /
[root@hadoop01 software]# hdfs dfs -put apache-maven-3.3.9-bin.zip? /
[root@hadoop01 software]# cd
[root@hadoop01 ~]# hdfs dfs -get /apache-maven-3.3.9-bin.zip

幫助

[-moveFromLocal <localsrc> ... <dst>]
? [-moveToLocal <src> <localdst>]
查看hadoop里的文件內(nèi)容
hadoop dfs -ls /
[root@hadoop01 ~]# hdfs dfs -ls /
Found 3 items
-rw-r--r--?? 3 root supergroup??? 8617253 2018-04-26 09:20 /apache-maven-3.3.9-bin.zip
-rw-r--r--?? 3 root supergroup????? 59776 2018-04-26 09:14 /install.log
-rw-r--r--?? 3 root supergroup????? 11067 2018-04-26 08:46 /install.log.syslog
查看hadoop里的文件的內(nèi)容
hadoop fs -cat filename
[root@hadoop01 ~]# hadoop fs -cat?? /file1
111

創(chuàng)建文件夾

hadoop fs -mkdir -p /filename/filename
[root@hadoop01 ~]#?? hadoop fs -mkdir -p /filename/filename

刪除file 刪除dir
[root@hadoop01 ~]# hadoop fs -rm -r -f /file1
Deleted /file1
[root@hadoop01 ~]# hadoop fs -rm -r -f /filename
Deleted /filename

#? [-rm [-f] [-r|-R] [-skipTrash] [-safely] <src> ...]
?
? 1.配置回收站
? vi core-site.xml
? <property>?
??? <name>fs.trash.interval</name>?
??? <value>10080</value>????????? # 回收站保留時(shí)間（分鐘）
? </property>
?
?
? 2.測(cè)試
? hadoop fs -rm -r -f /xxxx????????????????????????????? 進(jìn)入回收站，是可以恢復(fù)的
? hadoop fs -rm -r -f -skipTrash /xxxx?????? 不進(jìn)入回收站，是不可以恢復(fù)的
? A.進(jìn)入回收站
[root@hadoop01 ~]# hadoop fs -ls /
Found 4 items
-rw-r--r--?? 3 root supergroup??? 8617253 2018-04-26 09:20 /apache-maven-3.3.9-bin.zip
drwxr-xr-x?? - root supergroup????????? 0 2018-04-26 09:35 /dir
-rw-r--r--?? 3 root supergroup????? 59776 2018-04-26 09:14 /install.log
-rw-r--r--?? 3 root supergroup????? 11067 2018-04-26 08:46 /install.log.syslog
[root@hadoop01 ~]# hadoop fs -rm -r -f /install.log
18/04/26 09:38:28 INFO fs.TrashPolicyDefault: Moved: 'hdfs://172.16.18.133:9000/install.log' to trash at: hdfs://172.16.18.133:9000/user/root/.Trash/Current/install.log
[root@hadoop01 ~]# hadoop fs -ls
Found 1 items
drwx------?? - root supergroup????????? 0 2018-04-26 09:38 .Trash
[root@hadoop01 ~]# hadoop fs -ls
Found 1 items
drwx------?? - root supergroup????????? 0 2018-04-26 09:38 .Trash
[root@hadoop01 ~]# hadoop fs -ls .Trash/
Found 1 items
drwx------?? - root supergroup????????? 0 2018-04-26 09:38 .Trash/Current
[root@hadoop01 ~]# hadoop fs -ls .Trash/Current
Found 1 items
-rw-r--r--?? 3 root supergroup????? 59776 2018-04-26 09:14 .Trash/Current/install.log
? 恢復(fù)剛剛刪除的文件
[root@hadoop01 ~]# hadoop fs -ls /user
Found 1 items
drwx------?? - root supergroup????????? 0 2018-04-26 09:38 /user/root
[root@hadoop01 ~]# hadoop fs -ls /user/root/
Found 1 items
drwx------?? - root supergroup????????? 0 2018-04-26 09:38 /user/root/.Trash
[root@hadoop01 ~]# hadoop fs -mv /user/root/.Trash/Current/install.log? /
[root@hadoop01 ~]# hadoop fs -ls /
Found 5 items
-rw-r--r--?? 3 root supergroup??? 8617253 2018-04-26 09:20 /apache-maven-3.3.9-bin.zip
drwxr-xr-x?? - root supergroup????????? 0 2018-04-26 09:35 /dir
-rw-r--r--?? 3 root supergroup????? 59776 2018-04-26 09:14 /install.log
-rw-r--r--?? 3 root supergroup????? 11067 2018-04-26 08:46 /install.log.syslog
drwx------?? - root supergroup????????? 0 2018-04-26 09:38 /user
?
? B.不進(jìn)入回收站
[root@hadoop01 ~]# hadoop fs -rm -r -f -skipTrash? /install.log.syslog
Deleted /install.log.syslog
[root@hadoop01 ~]# hadoop fs -ls
Found 1 items
drwx------?? - root supergroup????????? 0 2018-04-26 09:38 .Trash
[root@hadoop01 ~]# hadoop fs -ls .Trash/Current
[root@hadoop01 ~]#????????

hdfs fs -moveFromLocal /input/xx.txt /input/xx.txt? ---從本地剪切粘貼到hdfs

hdfs fs -moveToLocal /input/xx.txt /input/xx.txt? --從hdfs剪切粘貼到本地

hdfs fs -appedToFile ./hello.txt /input/hello.txt? ---追加一個(gè)文件到另一個(gè)文件到末尾

注意：appedToFile? moveToLocal moveFromLocal? 大小寫嚴(yán)格

hdfs fs -cat /input/hello.txt?? ---查看文件內(nèi)容

hdfs fs -tail /input/hello.txt?? ---顯示一個(gè)文件到末尾

hdfs fs -text /input/hello.txt? ---以字符串的形式打印文件的內(nèi)容

hdfs fs -chmod 666 /input/hello.txt?? ---修改文件權(quán)限

hdfs fs -chown ruoze.ruoze? /input/hello.txt?? --修改文件所屬

hdfs fs -copyFromLocal /input/hello.txt /input/?? --從本地文件系統(tǒng)拷貝到hdfs里

hdfs fs -copyToLocal /input/hello.txt /input/???? --從hdfs拷貝到本地

hdfs fs -cp /input/xx.txt /output/xx.txt????????????? ---從hdfs到一個(gè)路徑拷貝到另一個(gè)路徑

hdfs fs -mv /input/xx.txt /output/xx.txt??????????? ---從hdfs到一個(gè)路徑移動(dòng)到另一個(gè)路徑

hdfs fs -df -h /????????????????????????????????????????????????????????????? ----統(tǒng)計(jì)文件系統(tǒng)的可用空間信息

hdfs fs -du -s -h /???????????????????????????????????????????????????????? ----統(tǒng)計(jì)文件夾的大小信息

hadoop? fs -count /aaa? -???????????????????????????????????????????? ---統(tǒng)計(jì)一個(gè)指定目錄下的文件節(jié)點(diǎn)數(shù)量

hadoop fs -setrep 3 /input/xx.txt?????????????????????????? --設(shè)置hdfs的文件副本數(shù)量

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn，海內(nèi)外云服務(wù)器15元起步，三天無(wú)理由+7*72小時(shí)售后在線，公司持有idc許可證，提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國(guó)服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案，具有“安全穩(wěn)定、簡(jiǎn)單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢(shì)，專為企業(yè)上云打造定制，能夠滿足用戶豐富、多元化的應(yīng)用場(chǎng)景需求。

分享名稱：大數(shù)據(jù)之---hadoop常用命令大全終極篇-創(chuàng)新互聯(lián)
文章URL：http://www.jbt999.com/article28/ccdicp.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供Google、ChatGPT、虛擬主機(jī)、定制開(kāi)發(fā)、定制網(wǎng)站、網(wǎng)站制作

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：[email protected]。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)