sort排序命令怎么使用
sort命令的功能是對(duì)文件中的各行進(jìn)行排序。sort命令有許多非常實(shí)用的選項(xiàng),這些選項(xiàng)最初是用來對(duì)數(shù)據(jù)庫格式的文件內(nèi)容進(jìn)行各種排序操作的。下面跟著學(xué)習(xí)啦小編一起來了解一下吧。
sort排序命令怎么使用
1 sort的工作原理
sort將文件的每一行作為一個(gè)單位,相互比較,比較原則是從首字符向后,依次按ASCII碼值進(jìn)行比較,最后將他們按升序輸出。
[rocrocket@rocrocket programming]$ cat seq.txt
banana
apple
pear
orange
[rocrocket@rocrocket programming]$ sort seq.txt
apple
banana
orange
pear
2 sort的-u選項(xiàng)
它的作用很簡(jiǎn)單,就是在輸出行中去除重復(fù)行。
[rocrocket@rocrocket programming]$ cat seq.txt
banana
apple
pear
orange
pear
[rocrocket@rocrocket programming]$ sort seq.txt
apple
banana
orange
pear
pear
[rocrocket@rocrocket programming]$ sort -u seq.txt
apple
banana
orange
pear
pear由于重復(fù)被-u選項(xiàng)無情的刪除了。
3 sort的-r選項(xiàng)
sort默認(rèn)的排序方式是升序,如果想改成降序,就加個(gè)-r就搞定了。
[rocrocket@rocrocket programming]$ cat number.txt
1
3
5
2
4
[rocrocket@rocrocket programming]$ sort number.txt
1
2
3
4
5
[rocrocket@rocrocket programming]$ sort -r number.txt
5
4
3
2
1
4 sort的-o選項(xiàng)
由于sort默認(rèn)是把結(jié)果輸出到標(biāo)準(zhǔn)輸出,所以需要用重定向才能將結(jié)果寫入文件,形如sort filename > newfile。
但是,如果你想把排序結(jié)果輸出到原文件中,用重定向可就不行了。
[rocrocket@rocrocket programming]$ sort -r number.txt > number.txt
[rocrocket@rocrocket programming]$ cat number.txt
[rocrocket@rocrocket programming]$
看,竟然將number清空了。
就在這個(gè)時(shí)候,-o選項(xiàng)出現(xiàn)了,它成功的解決了這個(gè)問題,讓你放心的將結(jié)果寫入原文件。這或許也是-o比重定向的唯一優(yōu)勢(shì)所在。
[rocrocket@rocrocket programming]$ cat number.txt
1
3
5
2
4
[rocrocket@rocrocket programming]$ sort -r number.txt -o number.txt
[rocrocket@rocrocket programming]$ cat number.txt
5
4
3
2
1
5 sort的-n選項(xiàng)
你有沒有遇到過10比2小的情況。我反正遇到過。出現(xiàn)這種情況是由于排序程序?qū)⑦@些數(shù)字按字符來排序了,排序程序會(huì)先比較1和2,顯然1小,所以就將10放在2前面嘍。這也是sort的一貫作風(fēng)。
我們?nèi)绻敫淖冞@種現(xiàn)狀,就要使用-n選項(xiàng),來告訴sort,“要以數(shù)值來排序”!
[rocrocket@rocrocket programming]$ cat number.txt
1
10
19
11
2
5
[rocrocket@rocrocket programming]$ sort number.txt
1
10
11
19
2
5
[rocrocket@rocrocket programming]$ sort -n number.txt
1
2
5
10
11
19
6 sort的-t選項(xiàng)和-k選項(xiàng)
如果有一個(gè)文件的內(nèi)容是這樣:
[rocrocket@rocrocket programming]$ cat facebook.txt
banana:30:5.5
apple:10:2.5
pear:90:2.3
orange:20:3.4
這個(gè)文件有三列,列與列之間用冒號(hào)隔開了,第一列表示水果類型,第二列表示水果數(shù)量,第三列表示水果價(jià)格。
那么我想以水果數(shù)量來排序,也就是以第二列來排序,如何利用sort實(shí)現(xiàn)?
幸好,sort提供了-t選項(xiàng),后面可以設(shè)定間隔符。(是不是想起了cut和paste的-d選項(xiàng),共鳴~~)
指定了間隔符之后,就可以用-k來指定列數(shù)了。
[rocrocket@rocrocket programming]$ sort -n -k 2 -t : facebook.txt
apple:10:2.5
orange:20:3.4
banana:30:5.5
pear:90:2.3
我們使用冒號(hào)作為間隔符,并針對(duì)第二列來進(jìn)行數(shù)值升序排序,結(jié)果很令人滿意。
7 其他的sort常用選項(xiàng)
-f會(huì)將小寫字母都轉(zhuǎn)換為大寫字母來進(jìn)行比較,亦即忽略大小寫
-c會(huì)檢查文件是否已排好序,如果亂序,則輸出第一個(gè)亂序的行的相關(guān)信息,最后返回1
-C會(huì)檢查文件是否已排好序,如果亂序,不輸出內(nèi)容,僅返回1
-M會(huì)以月份來排序,比如JAN小于FEB等等
-b會(huì)忽略每一行前面的所有空白部分,從第一個(gè)可見字符開始比較。
有時(shí)候?qū)W習(xí)腳本,你會(huì)發(fā)現(xiàn)sort命令后面跟了一堆類似-k1,2,或者-k1.2 -k3.4的東東,有些匪夷所思。今天,我們就來搞定它—-k選項(xiàng)!
1 準(zhǔn)備素材
$ cat facebook.txt
google 110 5000
baidu 100 5000
guge 50 3000
sohu 100 4500
第一個(gè)域是公司名稱,第二個(gè)域是公司人數(shù),第三個(gè)域是員工平均工資。(除了公司名稱,其他的別信,都瞎寫的^_^)
2 我想讓這個(gè)文件按公司的字母順序排序,也就是按第一個(gè)域進(jìn)行排序:(這個(gè)facebook.txt文件有三個(gè)域)
$ sort -t ‘ ‘ -k 1 facebook.txt
baidu 100 5000
google 110 5000
guge 50 3000
sohu 100 4500
看到了吧,就直接用-k 1設(shè)定就可以了。(其實(shí)此處并不嚴(yán)格,稍后你就會(huì)知道)
3 我想讓facebook.txt按照公司人數(shù)排序
$ sort -n -t ‘ ‘ -k 2 facebook.txt
guge 50 3000
baidu 100 5000
sohu 100 4500
google 110 5000
不用解釋,我相信你能懂。
但是,此處出現(xiàn)了問題,那就是baidu和sohu的公司人數(shù)相同,都是100人,這個(gè)時(shí)候怎么辦呢?按照默認(rèn)規(guī)矩,是從第一個(gè)域開始進(jìn)行升序排序,因此baidu排在了sohu前面。
4 我想讓facebook.txt按照公司人數(shù)排序 ,人數(shù)相同的按照員工平均工資升序排序:
$ sort -n -t ‘ ‘ -k 2 -k 3 facebook.txt
guge 50 3000
sohu 100 4500
baidu 100 5000
google 110 5000
看,我們加了一個(gè)-k2 -k3就解決了問題。對(duì)滴,sort支持這種設(shè)定,就是說設(shè)定域排序的優(yōu)先級(jí),先以第2個(gè)域進(jìn)行排序,如果相同,再以第3個(gè)域進(jìn)行排序。(如果你愿意,可以一直這么寫下去,設(shè)定很多個(gè)排序優(yōu)先級(jí))
5 我想讓facebook.txt按照員工工資降序排序,如果員工人數(shù)相同的,則按照公司人數(shù)升序排序:(這個(gè)有點(diǎn)難度嘍)
$ sort -n -t ‘ ‘ -k 3r -k 2 facebook.txt
baidu 100 5000
google 110 5000
sohu 100 4500
guge 50 3000
此處有使用了一些小技巧,你仔細(xì)看看,在-k 3后面偷偷加上了一個(gè)小寫字母r。你想想,再結(jié)合我們上一篇文章,能得到答案么?揭曉:r和-r選項(xiàng)的作用是一樣的,就是表示逆序。因?yàn)閟ort默認(rèn)是按照升序排序的,所以此處需要加上r表示第三個(gè)域(員工平均工資)是按照降序排序。此處你還可以加上n,就表示對(duì)這個(gè)域進(jìn)行排序時(shí),要按照數(shù)值大小進(jìn)行排序,舉個(gè)例子吧:
$ sort -t ‘ ‘ -k 3nr -k 2n facebook.txt
baidu 100 5000
google 110 5000
sohu 100 4500
guge 50 3000
看,我們?nèi)サ袅俗钋懊娴?n選項(xiàng),而是將它加入到了每一個(gè)-k選項(xiàng)中了。
6 -k選項(xiàng)的具體語法格式
要繼續(xù)往下深入的話,就不得不來點(diǎn)理論知識(shí)。你需要了解-k選項(xiàng)的語法格式,如下:
[ FStart [ .CStart ] ] [ Modifier ] [ , [ FEnd [ .CEnd ] ][ Modifier ] ]
這個(gè)語法格式可以被其中的逗號(hào)(“,”)分為兩大部分,Start部分和End部分。
先給你灌輸一個(gè)思想,那就是“如果不設(shè)定End部分,那么就認(rèn)為End被設(shè)定為行尾”。這個(gè)概念很重要的,但往往你不會(huì)重視它。
Start部分也由三部分組成,其中的Modifier部分就是我們之前說過的類似n和r的選項(xiàng)部分。我們重點(diǎn)說說Start部分的FStart和C.Start。
C.Start也是可以省略的,省略的話就表示從本域的開頭部分開始。之前例子中的-k 2和-k 3就是省略了C.Start的例子嘍。
FStart.CStart,其中FStart就是表示使用的域,而CStart則表示在FStart域中從第幾個(gè)字符開始算“排序首字符”。
同理,在End部分中,你可以設(shè)定FEnd.CEnd,如果你省略.CEnd,則表示結(jié)尾到“域尾”,即本域的最后一個(gè)字符。或者,如果你將CEnd設(shè)定為0(零),也是表示結(jié)尾到“域尾”。
7 突發(fā)奇想,從公司英文名稱的第二個(gè)字母開始進(jìn)行排序:
$ sort -t ‘ ‘ -k 1.2 facebook.txt
baidu 100 5000
sohu 100 4500
google 110 5000
guge 50 3000
看,我們使用了-k 1.2,這就表示對(duì)第一個(gè)域的第二個(gè)字符開始到本域的最后一個(gè)字符為止的字符串進(jìn)行排序。你會(huì)發(fā)現(xiàn)baidu因?yàn)榈诙€(gè)字母是a而名列榜首。sohu和 google第二個(gè)字符都是o,但sohu的h在google的o前面,所以兩者分別排在第二和第三。guge只能屈居第四了。
8 又突發(fā)奇想,,只針對(duì)公司英文名稱的第二個(gè)字母進(jìn)行排序,如果相同的按照員工工資進(jìn)行降序排序:
$ sort -t ‘ ‘ -k 1.2,1.2 -k 3,3nr facebook.txt
baidu 100 5000
google 110 5000
sohu 100 4500
guge 50 3000
由于只對(duì)第二個(gè)字母進(jìn)行排序,所以我們使用了-k 1.2,1.2的表示方式,表示我們“只”對(duì)第二個(gè)字母進(jìn)行排序。(如果你問“我使用-k 1.2怎么不行?”,當(dāng)然不行,因?yàn)槟闶÷粤薊nd部分,這就意味著你將對(duì)從第二個(gè)字母起到本域最后一個(gè)字符為止的字符串進(jìn)行排序)。對(duì)于員工工資進(jìn)行排 序,我們也使用了-k 3,3,這是最準(zhǔn)確的表述,表示我們“只”對(duì)本域進(jìn)行排序,因?yàn)槿绻闶÷粤撕竺娴?,就變成了我們“對(duì)第3個(gè)域開始到最后一個(gè)域位置的內(nèi)容進(jìn)行排序” 了。
9 在modifier部分還可以用到哪些選項(xiàng)?
可以用到b、d、f、i、n 或 r。
其中n和r你肯定已經(jīng)很熟悉了。
b表示忽略本域的簽到空白符號(hào)。
d表示對(duì)本域按照字典順序排序(即,只考慮空白和字母)。
f表示對(duì)本域忽略大小寫進(jìn)行排序。
i表示忽略“不可打印字符”,只針對(duì)可打印字符進(jìn)行排序。(有些ASCII就是不可打印字符,比如\a是報(bào)警,\b是退格,\n是換行,\r是回車等等)
10 思考思考關(guān)于-k和-u聯(lián)合使用的例子:
$ cat facebook.txt
google 110 5000
baidu 100 5000
guge 50 3000
sohu 100 4500
這是最原始的facebook.txt文件。
$ sort -n -k 2 facebook.txt
guge 50 3000
baidu 100 5000
sohu 100 4500
google 110 5000
$ sort -n -k 2 -u facebook.txt
guge 50 3000
baidu 100 5000
google 110 5000
當(dāng)設(shè)定以公司員工域進(jìn)行數(shù)值排序,然后加-u后,sohu一行就被刪除了!原來-u只識(shí)別用-k設(shè)定的域,發(fā)現(xiàn)相同,就將后續(xù)相同的行都刪除。
$ sort -k 1 -u facebook.txt
baidu 100 5000
google 110 5000
guge 50 3000
sohu 100 4500
$ sort -k 1.1,1.1 -u facebook.txt
baidu 100 5000
google 110 5000
sohu 100 4500
這個(gè)例子也同理,開頭字符是g的guge就沒有幸免于難。
$ sort -n -k 2 -k 3 -u facebook.txt
guge 50 3000
sohu 100 4500
baidu 100 5000
google 110 5000
咦!這里設(shè)置了兩層排序優(yōu)先級(jí)的情況下,使用-u就沒有刪除任何行。原來-u是會(huì)權(quán)衡所有-k選項(xiàng),將都相同的才會(huì)刪除,只要其中有一級(jí)不同都不會(huì)輕易刪除的:)(不信,你可以自己加一行sina 100 4500試試看)
11 最詭異的排序:
$ sort -n -k 2.2,3.1 facebook.txt
guge 50 3000
baidu 100 5000
sohu 100 4500
google 110 5000
以第二個(gè)域的第二個(gè)字符開始到第三個(gè)域的第一個(gè)字符結(jié)束的部分進(jìn)行排序。
第一行,會(huì)提取0 3,第二行提取00 5,第三行提取00 4,第四行提取10 5。
又因?yàn)閟ort認(rèn)為0小于00小于000小于0000….
因此0 3肯定是在第一個(gè)。10 5肯定是在最后一個(gè)。但為什么00 5卻在00 4前面呢?(你可以自己做實(shí)驗(yàn)思考一下。)
答案揭曉:原來“跨域的設(shè)定是個(gè)假象”,sort只會(huì)比較第二個(gè)域的第二個(gè)字符到第二個(gè)域的最后一個(gè)字符的部分,而不會(huì)把第三個(gè)域的開頭字符納入比較范圍。當(dāng)發(fā)現(xiàn)00和00相同時(shí),sort就會(huì)自動(dòng)比較第一個(gè)域去了。當(dāng)然baidu在sohu前面了。用一個(gè)范例即可證實(shí):
$ sort -n -k 2.2,3.1 -k 1,1r facebook.txt
guge 50 3000
sohu 100 4500
baidu 100 5000
google 110 5000
12 有時(shí)候在sort命令后會(huì)看到+1 -2這些符號(hào),這是什么東東?
關(guān)于這種語法,最新的sort是這么進(jìn)行解釋的:
On older systems, `sort’ supports an obsolete origin-zero syntax `+POS1 [-POS2]‘ for specifying sort keys. POSIX 1003.1-2001 (*note Standards conformance::) does not allow this; use `-k’ instead.
原來,這種古老的表示方式已經(jīng)被淘汰了,以后可以理直氣壯的鄙視使用這種表示方法的腳本嘍!
(為了防止古老腳本的存在,在這再說一下這種表示方法,加號(hào)表示Start部分,減號(hào)表示End部分。最最重要的一點(diǎn)是,這種方式方法是從0開始計(jì)數(shù)的,以前所說的第一個(gè)域,在此被表示為第0個(gè)域。以前的第2個(gè)字符,在此表示為第1個(gè)字符。)
看過“ sort排序命令怎么使用 ”的人還看了:
1.Linux如何使用awk進(jìn)行數(shù)組排序
2.關(guān)于Linux下ps命令的10個(gè)基本例子是什么
5.分析Linux系統(tǒng)rc.sysinit腳本