linux下進(jìn)行文件的解壓、復(fù)制、移動(dòng)應(yīng)該是最常見(jiàn)的操作了。尤其是我們?cè)陧?xiàng)目中使用大量的數(shù)據(jù)集文件(比如機(jī)器學(xué)習(xí))時(shí)。然而使用這些命令時(shí)一不留神就會(huì)掉進(jìn)坑里,這篇文章我們就來(lái)細(xì)數(shù)用Shell進(jìn)行文件操作的這些坑。
將文件單個(gè)地進(jìn)行壓縮與解壓
Linux下壓縮文件的常見(jiàn)擴(kuò)展名包括.gz,.tar,.tar.gz, .zip等。這些壓縮格式都能夠跨平臺(tái)(windows/mac/Linux)使用。下面我們以.zip文件為例子來(lái)講解。我們已知一個(gè)文本文件壓縮包test.zip,想把它解壓,很簡(jiǎn)單,運(yùn)行unzip命令即可:
orion-orion@MacBook-Pro Learn-Linux % unzip test.zip
Archive: test.zip
inflating: test.txt
如果我們想要將test.txt重新壓縮呢?你可能情不自禁會(huì)執(zhí)行zip test.txt,然后我們發(fā)現(xiàn)提示:
orion-orion@MacBook-Pro Learn-Linux % zip test.txt
zip warning: missing end signature--probably not a zip file (did you
zip warning: remember to use binary mode when you transferred it?)
zip warning: (if you are trying to read a damaged archive try -F)
zip error: Zip file structure invalid (test.txt)
其實(shí)是傳參數(shù)傳錯(cuò)了,導(dǎo)致zip誤把test.txt當(dāng)成壓縮后的文件名了,這當(dāng)然不是合法的。我們看zip的參數(shù)構(gòu)成:
zip [-options] [-b path] [-t mmddyyyy] [-n suffixes] [zipfile list] [-xi list]
[-b path]是壓縮后的.zip文件的路徑,zipfile list是待壓縮的文件列表。于是,我們這樣寫(xiě)即可成功壓縮:
orion-orion@MacBook-Pro Learn-Linux % zip test2.zip test.txt
adding: test.txt (stored 0%)
當(dāng)然,zip也支持將多個(gè)文件壓縮:
orion-orion@MacBook-Pro Learn-Linux % zip test3.zip test.txt test2.txt
adding: test.txt (stored 0%)
adding: test2.txt (stored 0%)
此時(shí)我們發(fā)現(xiàn)再解壓test3.zip會(huì)發(fā)現(xiàn)重新得到了兩個(gè)原始文件:
orion-orion@MacBook-Pro Learn-Linux % unzip test3.zip
Archive: test3.zip
extracting: test.txt
extracting: test2.txt
zip也支持對(duì)目錄壓縮,如我們嘗試壓縮test目錄:
orion-orion@MacBook-Pro Learn-Linux % zip test4.zip test
adding: test/ (stored 0%)
此時(shí)再解壓test4.zip則會(huì)重新生成test目錄:
orion-orion@MacBook-Pro Learn-Linux % unzip test4.zip
Archive: test4.zip
creating: test/
不過(guò),zip是將輸入的文件列表分別進(jìn)行壓縮的操作,即是對(duì)目錄來(lái)進(jìn)行壓縮也是對(duì)目錄內(nèi)的所有文件one-by-one的操作。那我們需要將很多文件先打包成一個(gè)文件,然后再壓縮呢?此時(shí)就要用到tar了。
tar:打包命令
很多人誤解tar是個(gè)壓縮命令,其實(shí)壓縮命令是gzip、xz以及我們上文提到的zip這些。tar是個(gè)打包命令,只不過(guò)附帶壓縮與解壓的功能。tar的選項(xiàng)多如牛毛,為了減輕大家的記憶負(fù)擔(dān),我們只介紹下面兩個(gè)選項(xiàng):
-c: 建立打包文件(可搭配-v將過(guò)程中打包的文件可視化);
-x:解包或解壓縮的功能(可搭配-C在特定目錄解壓);
(其實(shí)還有表示通過(guò)gzip進(jìn)行壓縮/解壓縮的-z,通過(guò)bzip2的支持進(jìn)行壓縮/解壓縮的-j,通過(guò)xz的支持進(jìn)行壓縮解壓縮的-J等,但我們這里統(tǒng)一用.zip示范,就省去這些參數(shù)了)
那么,我們只需要記住下面的命令即可:
壓縮: tar -cv -f filename.zip 要被壓縮的文件或目錄名稱(chēng)
解壓縮:tar -xv -f filename.zip -C 欲解壓的目錄(這個(gè)目錄必須已經(jīng)存在)
注意,壓縮傳參順序是壓縮后的.zip文件在前,壓縮前的文件在后,別搞錯(cuò)了。(讓人聯(lián)想到gcc編譯器,不過(guò)gcc傳參時(shí)規(guī)定是-o output_file.out的形式來(lái)指定輸出的可執(zhí)行文件,就回避了這個(gè)順序問(wèn)題)
比如,我們要將test文件夾(該文件夾下有一個(gè)test.txt文件)壓縮,可以運(yùn)行如下命令:
orion-orion@MacBook-Pro Learn-Linux % tar -cv -f test4.zip test
a test
a test/test.txt
然后將其解壓到當(dāng)前目錄,可運(yùn)行如下命令:
orion-orion@MacBook-Pro Learn-Linux % tar -xv -f test4.zip -C .
x test/
x test/test.txt
對(duì)多個(gè)文件壓縮:
orion-orion@MacBook-Pro Learn-Linux % tar -cv -f test3.zip test.txt test2.txt
a test.txt
a test2.txt
然后將其解壓到當(dāng)前目錄:
orion-orion@MacBook-Pro Learn-Linux % tar -xv -f test3.zip -C .
x test.txt
x test2.txt
由上面所說(shuō),zip/unzip和tar都是壓縮什么解壓出來(lái)就是什么,原來(lái)是目錄就是目錄,原來(lái)沒(méi)目錄不會(huì)幫你自動(dòng)生成一個(gè)目錄,但Linux或Mac系統(tǒng)的可視化壓縮工具就不一樣了(在Mac中被稱(chēng)為「歸檔實(shí)用工具」)。Mac中對(duì)目錄壓縮時(shí)壓縮命令和tar命令是等效的,比如我們想用Mac自帶的壓縮工具壓縮test文件夾:
會(huì)生成對(duì)應(yīng)的歸檔文件:
再解壓會(huì)得到同樣的文件夾(會(huì)自動(dòng)幫我們重命名),不會(huì)幫我們生成多余的目錄:
然而,如果我們嘗試用Mac自帶的壓縮工具壓縮多個(gè)文件:
它會(huì)自動(dòng)幫我們生成一個(gè)名為歸檔.zip的文件:
然后,如果此時(shí)我們嘗試對(duì)歸檔.zip文件進(jìn)行解壓,會(huì)發(fā)現(xiàn)系統(tǒng)會(huì)自動(dòng)幫我們生成一個(gè)名為歸檔 的文件夾:
這個(gè)文件夾內(nèi)部才是我們需要的文件:
這在對(duì)大量文件操作時(shí)需要額外注意,否則會(huì)白白開(kāi)銷(xiāo)你一次拷貝文件的時(shí)間!
文件拷貝
我們緊接上面的情景。假設(shè)我們當(dāng)前的目錄為項(xiàng)目目錄,而我們手滑使用了系統(tǒng)自帶的可視化解壓工具生成了一個(gè)多余的目錄。我們接下來(lái)要把系統(tǒng)生成的多余的歸檔文件夾里的文件拷貝到當(dāng)前目錄,那么我們可以使用帶r參數(shù)的cp命令:
orion-orion@MacBook-Pro Learn-Linux % cp -r 歸檔/ .
orion-orion@MacBook-Pro Learn-Linux % ls
test.txt test2.txt 歸檔
這里-r參數(shù)表示遞歸復(fù)制命令,用于目錄的遞歸復(fù)制。注意命令中的歸檔/表示歸檔目錄下的所有文件,意思和歸檔/*相同:
orion-orion@MacBook-Pro Learn-Linux % cp -r 歸檔/* .
orion-orion@MacBook-Pro Learn-Linux % ls
test.txt test2.txt 歸檔
選項(xiàng)參數(shù)-r寫(xiě)成-R是等效的:
orion-orion@MacBook-Pro Learn-Linux % cp -R 歸檔/* .
orion-orion@MacBook-Pro Learn-Linux % ls
test.txt test2.txt 歸檔
但如果直接傳入?yún)?shù)歸檔,則表示將這個(gè)目錄整個(gè)地復(fù)制:
orion-orion@MacBook-Pro Learn-Linux % cp -r 歸檔 .
cp: ./歸檔 and 歸檔 are identical (not copied).
同一個(gè)目錄下不可能有兩個(gè)相同名稱(chēng)的子目錄,這當(dāng)然就會(huì)出錯(cuò),當(dāng)然我們可以將其復(fù)制到另外一個(gè)目錄里:
orion-orion@MacBook-Pro Learn-Linux % cp -r 歸檔 /tmp
orion-orion@MacBook-Pro Learn-Linux % ls /tmp |grep 歸檔
歸檔
你可能要問(wèn),加r和不加r有啥區(qū)別?如果不加r,則默認(rèn)是跳過(guò)目錄的,也就是說(shuō)只能copy文件:
orion-orion@MacBook-Pro Learn-Linux % cp 歸檔/ .
cp: 歸檔/ is a directory (not copied).
orion-orion@MacBook-Pro Learn-Linux % cp 歸檔 /tmp
cp: 歸檔 is a directory (not copied).
文件移動(dòng)
我們還是緊接著上面的場(chǎng)景。假定我們已經(jīng)將歸檔文件夾中的test.txt、test2.txt成功拷貝到當(dāng)前項(xiàng)目目錄了。現(xiàn)在我們有了個(gè)新的需求:我們?cè)陧?xiàng)目目錄中建了一個(gè)data子目錄,現(xiàn)在需要將項(xiàng)目目錄中的test.txt、test2.txt移動(dòng)到data子目錄中。這就需要如下命令:
orion-orion@MacBook-Pro Learn-Linux % mv test2.txt test.txt data
orion-orion@MacBook-Pro Learn-Linux % ls data
test.txt test2.txt
注意,如果有多個(gè)源文件或目錄,則最后一個(gè)目標(biāo)文件(也就是這里的data)一定是目錄。當(dāng)我們只移動(dòng)一個(gè)文件時(shí),就有潛在的二義性。這里因?yàn)閐ata目錄本身存在,我們移動(dòng)test.txt到data目錄還能正常執(zhí)行:
orion-orion@MacBook-Pro Learn-Linux % mv test.txt data
orion-orion@MacBook-Pro Learn-Linux % ls data
test.txt
但是如果data目錄不存在,就會(huì)將mv解釋為重命名的意思,比如如果我們將data目錄刪除再執(zhí)行:
orion-orion@MacBook-Pro Learn-Linux % mv test.txt data
此時(shí)就等效于把test.txt更名為data文件:
orion-orion@MacBook-Pro Learn-Linux % ls -l|grep data
-rw-r--r-- 1 orion-orion staff 0 4 20 22:01 data
可以看出,第一個(gè)字母是-,也就意味著data是普通文件,不是目錄(是目錄的話第一個(gè)字母是d)。
因此,使用mv語(yǔ)句時(shí)要格外小心,因?yàn)樗扔幸苿?dòng)到目錄的作用,也有重命名的作用,一不注意就可能出錯(cuò)!