Linux 命令find、grep

本文就向你們介紹find、grep命令,他哥倆能夠算是必會的linux命令,我幾乎天天都要用到他們。本文結構以下:linux

  • find命令web

    • find命令的通常形式正則表達式

    • find命令的經常使用選項及實例shell

    • find與xargsexpress

  • grep命令apache

    • grep命令的通常形式安全

    • grep正則表達式元字符集(基本集)app

    • grep命令的經常使用選項及實例工具

一、find命令

find命令是一個無處不在命令,是linux中最有用的命令之一。find命令用於:在一個目錄(及子目錄)中搜索文件,你能夠指定一些匹配條件,如按文件名、文件類型、用戶甚至是時間戳查找文件。下面就經過實例來體驗下find命令的強大。性能

1.一、find命令的通常形式

man文檔中給出的find命令的通常形式爲:

find [-H] [-L] [-P] [-D debugopts] [-Olevel] [path...] [expression]

其實[-H] [-L] [-P] [-D debugopts] [-Olevel]這幾個選項並不經常使用(至少在個人平常工做中,沒有用到過),上面的find命令的經常使用形式能夠簡化爲:

find [path...] [expression]

  • path:find命令所查找的目錄路徑。例如用.來表示當前目錄,用/來表示系統根目錄

  • expression:expression能夠分爲——「-options [-print -exec -ok ...]」

  • -options,指定find命令的經常使用選項,下節詳細介紹

  • -print,find命令將匹配的文件輸出到標準輸出

  • -exec,find命令對匹配的文件執行該參數所給出的shell命令。相應命令的形式爲'command' {  } \;,注意{   }和\;之間的空格 
    find ./ -size 0 -exec rm {} \; 刪除文件大小爲零的文件 (還能夠以這樣作:rm -i `find ./ -size 0`  或 find ./ -size 0 | xargs rm -f &) 
    爲了用ls -l命令列出所匹配到的文件,能夠把ls -l命令放在find命令的-exec選項中:find . -type f -exec ls -l {  } \; 
    在/logs目錄中查找更改時間在5日之前的文件並刪除它們:find /logs -type f -mtime +5 -exec rm {  } \;

  • -ok,和-exec的做用相同,只不過以一種更爲安全的模式來執行該參數所給出的shell命令,在執行每個命令以前,都會給出提示,讓用戶來肯定是否執行。 
    find . -name "*.conf"  -mtime +5 -ok rm {  } \; 在當前目錄中查找全部文件名以.LOG結尾、更改時間在5日以上的文件,並刪除它們,只不過在刪除以前先給出提示

也有人這樣總結find命令的結構:

find start_directory test 
     options 
     criteria_to_match 
     action_to_perform_on_results

1.二、find命令的經常使用選項及實例

  • -name 
    按照文件名查找文件。 
    find /dir -name filename  在/dir目錄及其子目錄下面查找名字爲filename的文件 
    find . -name "*.c" 在當前目錄及其子目錄(用「.」表示)中查找任何擴展名爲「c」的文件

  • -perm 
    按照文件權限來查找文件。 
    find . -perm 755 –print 在當前目錄下查找文件權限位爲755的文件,即文件屬主能夠讀、寫、執行,其餘用戶能夠讀、執行的文件

  • -prune 
    使用這一選項可使find命令不在當前指定的目錄中查找,若是同時使用-depth選項,那麼-prune將被find命令忽略。 
    find /apps -path "/apps/bin" -prune -o –print 在/apps目錄下查找文件,但不但願在/apps/bin目錄下查找 
    find /usr/sam -path "/usr/sam/dir1" -prune -o –print 在/usr/sam目錄下查找不在dir1子目錄以內的全部文件

  • -user 
    按照文件屬主來查找文件。 
    find ~ -user sam –print 在$HOME目錄中查找文件屬主爲sam的文件

  • -group 
    按照文件所屬的組來查找文件。 
    find /apps -group gem –print 在/apps目錄下查找屬於gem用戶組的文件 

  • -mtime -n +n 
    按照文件的更改時間來查找文件, - n表示文件更改時間距如今n天之內,+ n表示文件更改時間距如今n天之前。 
    find / -mtime -5 –print 在系統根目錄下查找更改時間在5日之內的文件 
    find /var/adm -mtime +3 –print 在/var/adm目錄下查找更改時間在3日之前的文件

  • -nogroup 
    查找無有效所屬組的文件,即該文件所屬的組在/etc/groups中不存在。 
    find / –nogroup -print

  • -nouser 
    查找無有效屬主的文件,即該文件的屬主在/etc/passwd中不存在。 
    find /home -nouser –print

  • -newer file1 ! file2 
    查找更改時間比文件file1新但比文件file2舊的文件。

  • -type 
    查找某一類型的文件,諸如: 
    b - 塊設備文件。 
    d - 目錄。 
    c - 字符設備文件。 
    p - 管道文件。 
    l - 符號連接文件。 
    f - 普通文件。 
    find /etc -type d –print 在/etc目錄下查找全部的目錄 
    find . ! -type d –print 在當前目錄下查找除目錄之外的全部類型的文件 
    find /etc -type l –print 在/etc目錄下查找全部的符號連接文件

  • -size n:[c] 查找文件長度爲n塊的文件,帶有c時表示文件長度以字節計。 
    find . -size +1000000c –print 在當前目錄下查找文件長度大於1 M字節的文件 
    find /home/apache -size 100c –print 在/home/apache目錄下查找文件長度剛好爲100字節的文件 
    find . -size +10 –print 在當前目錄下查找長度超過10塊的文件(一塊等於512字節)

  • -depth:在查找文件時,首先查找當前目錄中的文件,而後再在其子目錄中查找。 
    find / -name "CON.FILE" -depth –print 它將首先匹配全部的文件而後再進入子目錄中查找 

  • -mount:在查找文件時不跨越文件系統mount點。  
    find . -name "*.XC" -mount –print 從當前目錄開始查找位於本文件系統中文件名以XC結尾的文件(不進入其餘文件系統)

  • -follow:若是find命令遇到符號連接文件,就跟蹤至連接所指向的文件。

1.三、find與xargs

在使用find命令的-exec選項處理匹配到的文件時, find命令將全部匹配到的文件一塊兒傳遞給exec執行。但有些系統對可以傳遞給exec的命令長度有限制,這樣在find命令運行幾分鐘以後,就會出現溢出錯誤。錯誤信息一般是「參數列太長」或「參數列溢出」。這就是xargs命令的用處所在,特別是與find命令一塊兒使用。

find命令把匹配到的文件傳遞給xargs命令,而xargs命令每次只獲取一部分文件而不是所有,不像-exec選項那樣。這樣它能夠先處理最早獲取的一部分文件,而後是下一批,並如此繼續下去。

在有些系統中,使用-exec選項會爲處理每個匹配到的文件而發起一個相應的進程,並不是將匹配到的文件所有做爲參數一次執行;這樣在有些狀況下就會出現進程過多,系統性能降低的問題,於是效率不高;

而使用xargs命令則只有一個進程。另外,在使用xargs命令時,到底是一次獲取全部的參數,仍是分批取得參數,以及每一次獲取參數的數目都會根據該命令的選項及系統內核中相應的可調參數來肯定。

來看看xargs命令是如何同find命令一塊兒使用的,並給出一些例子。

find . -type f -print | xargs file 查找系統中的每個普通文件,而後使用xargs命令來測試它們分別屬於哪類文件

find / -name "core" -print | xargs echo "" >/tmp/core.log 在整個系統中查找內存信息轉儲文件(core dump) ,而後把結果保存到/tmp/core.log 文件中:

find . -type f -print | xargs grep "hostname" 用grep命令在全部的普通文件中搜索hostname這個詞

find ./ -mtime +3 -print|xargs rm -f –r 刪除3天之前的全部東西 (find . -ctime +3 -exec rm -rf {} \;)

find ./ -size 0 | xargs rm -f & 刪除文件大小爲零的文件

find命令配合使用exec和xargs可使用戶對所匹配到的文件執行幾乎全部的命令。

二、grep命令

grep (global search regular expression(RE) and print out the line,全面搜索正則表達式並把行打印出來)是一種強大的文本搜索工具,它能使用正則表達式搜索文本,並把匹配的行打印出來。

2.一、grep命令的通常選項及實例

grep [OPTIONS] PATTERN [FILE...] 
grep [OPTIONS] [-e PATTERN | -f FILE] [FILE...]

grep命令用於搜索由Pattern參數指定的模式,並將每一個匹配的行寫入標準輸出中。這些模式是具備限定的正則表達式,它們使用ed或egrep命令樣式。若是在File參數中指定了多個名稱,grep命令將顯示包含匹配行的文件的名稱。對 shell 有特殊含義的字符 ($, *, [, |, ^, (, ), \ ) 出如今 Pattern參數中時必須帶雙引號。若是 Pattern參數不是簡單字符串,一般必須用單引號將整個模式括起來。在諸如 [a-z], 之類的表達式中,-(減號)cml 可根據當前正在整理的序列來指定一個範圍。整理序列能夠定義等價的類以供在字符範圍中使用。若是未指定任何文件,grep會假定爲標準輸入。

2.二、grep正則表達式元字符集(基本集)

^  錨定行的開始 如:'^grep'匹配全部以grep開頭的行。

grep'匹配全部以grep結尾的行。

.   匹配一個非換行符的字符 如:'gr.p'匹配gr後接一個任意字符,而後是p。

*  匹配零個或多個先前字符 如:' *grep'匹配全部一個或多個空格後緊跟grep的行。 .*一塊兒用表明任意字符。

[] 匹配一個指定範圍內的字符,如'[Gg]rep'匹配Grep和grep。

[^]  匹配一個不在指定範圍內的字符,如:'[^A-FH-Z]rep'匹配不包含A-F和H-Z的一個字母開頭,緊跟rep的行。

..  標記匹配字符,如:'love',love被標記爲1。

\<  錨定單詞的開始,如:'\<grep'匹配包含以grep開頭的單詞的行。

\>  錨定單詞的結束,如'grep\>'匹配包含以grep結尾的單詞的行。

x\{m\} 連續重複字符x,m次,如:'o\{5\}'匹配包含連續5個o的行。

x\{m,\} 連續重複字符x,至少m次,如:'o\{5,\}'匹配至少連續有5個o的行。

x\{m,n\} 連續重複字符x,至少m次,很少於n次,如:'o\{5,10\}'匹配連續5--10個o的行。

\w  匹配一個文字和數字字符,也就是[A-Za-z0-9],如:'G\w*p'匹配以G後跟零個或多個文字或數字字符,而後是p。

\W  w的反置形式,匹配一個非單詞字符,如點號句號等。\W*則可匹配多個。

\b  單詞鎖定符,如: '\bgrep\b'只匹配grep,即只能是grep這個單詞,兩邊均爲空格。

2.三、grep命令的經常使用選項及實例

-?

同時顯示匹配行上下的?行,如:grep -2 pattern filename同時顯示匹配行的上下2行。

-b,--byte-offset

打印匹配行前面打印該行所在的塊號碼。

-c,--count

只打印匹配的行數,不顯示匹配的內容。

-f File,--file=File

從文件中提取模板。空文件中包含0個模板,因此什麼都不匹配。

-h,--no-filename

當搜索多個文件時,不顯示匹配文件名前綴。

-i,--ignore-case

忽略大小寫差異。

-q,--quiet

取消顯示,只返回退出狀態。0則表示找到了匹配的行。

-l,--files-with-matches

打印匹配模板的文件清單。

-L,--files-without-match

打印不匹配模板的文件清單。

-n,--line-number

在匹配的行前面打印行號。

-s,--silent

不顯示關於不存在或者沒法讀取文件的錯誤信息。

-v,--revert-match

反檢索,只顯示不匹配的行。

-w,--word-regexp

若是被\<和\>引用,就把表達式作爲一個單詞搜索。

-V,--version

顯示軟件版本信息。

=====

ls -l | grep '^a' 經過管道過濾ls -l輸出的內容,只顯示以a開頭的行。

grep 'test' d* 顯示全部以d開頭的文件中包含test的行。

grep 'test' aa bb cc 顯示在aa,bb,cc文件中匹配test的行。

grep '[a-z]' aa 顯示全部包含每一個字符串至少有5個連續小寫字符的字符串的行。

grep 'w(es)t.*' aa 若是west被匹配,則es就被存儲到內存中,並標記爲1,而後搜索任意個字符(.*),這些字符後面緊跟着另一個es(),找到就顯示該行。若是用egrep或grep -E,就不用""號進行轉義,直接寫成'w(es)t.*'就能夠了。

grep -i pattern files :不區分大小寫地搜索。默認狀況區分大小寫

grep -l pattern files :只列出匹配的文件名,

grep -L pattern files :列出不匹配的文件名,

grep -w pattern files :只匹配整個單詞,而不是字符串的一部分(如匹配‘magic’,而不是‘magical’),

grep -C number pattern files :匹配的上下文分別顯示[number]行,

grep pattern1 | pattern2 files :顯示匹配 pattern1 或 pattern2 的行,

grep pattern1 files | grep pattern2 :顯示既匹配 pattern1 又匹配 pattern2 的行。