本篇內(nèi)容介紹了“有哪些Shell腳本去重的方法”的有關(guān)知識，在實(shí)際案例的操作過程中，不少人都會遇到這樣的困境，接下來就讓小編帶領(lǐng)大家學(xué)習(xí)一下如何處理這些情況吧！希望大家仔細(xì)閱讀，能夠?qū)W有所成！

創(chuàng)新互聯(lián)-專業(yè)網(wǎng)站定制、快速模板網(wǎng)站建設(shè)、高性價(jià)比蘭西網(wǎng)站開發(fā)、企業(yè)建站全套包干低至880元,成熟完善的模板庫,直接使用。一站式蘭西網(wǎng)站制作公司更省心,省錢,快速模板網(wǎng)站建設(shè)找我們，業(yè)務(wù)覆蓋蘭西地區(qū)。費(fèi)用合理售后完善，10年實(shí)體公司更值得信賴。

測試文件

代碼如下:

[root@bogon ~]# cat >test
jason
jason
jason
fffff
jason

按 Ctr + D保存

1、sort -u

代碼如下:

[root@bogon ~]# sort -u test
fffff
jason

2、uniq

代碼如下:

[root@bogon ~]# uniq test
jason
fffff
jason

由此可見，uniq需要先排序后才能去重

3、sort、管道和uniq結(jié)合運(yùn)用
去除重復(fù)并保留一份重復(fù)的數(shù)據(jù)

代碼如下:

[root@bogon ~]# sort test|uniq
fffff
jason

去除所有重復(fù)的行（不保留重復(fù)的行），并計(jì)算行數(shù)

代碼如下:

[root@bogon ~]# sort test|uniq -uc
      1 fffff

找出所有重復(fù)的行，并計(jì)算行數(shù)

代碼如下:

[root@bogon ~]# sort test|uniq -dc
      4 jason

根據(jù)某個(gè)字段去重

將原有數(shù)據(jù)改為

代碼如下:

[root@bogon ~]# more test
jason 1
jason 2
jason 1
fffff 2
jason 3
[root@bogon ~]# sort -k 1,1 -u test
fffff 2
jason 1

man sort查看sort的用法，-k參數(shù)是這么描述的：

代碼如下:

-k, --key=POS1[,POS2]
start a key at POS1 (origin 1), end it at POS2 (default end of line)

“有哪些Shell腳本去重的方法”的內(nèi)容就介紹到這里了，感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識可以關(guān)注創(chuàng)新互聯(lián)網(wǎng)站，小編將為大家輸出更多高質(zhì)量的實(shí)用文章！

網(wǎng)站題目：有哪些Shell腳本去重的方法-創(chuàng)新互聯(lián)
URL網(wǎng)址：http://www.aaarwkj.com/article32/coecpc.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供小程序開發(fā)、網(wǎng)站維護(hù)、定制開發(fā)、網(wǎng)站內(nèi)鏈、App設(shè)計(jì)、商城網(wǎng)站

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)