uniq 用於過濾相鄰重複行,預設保留首次出現的行。輸入輸出檔案不可同名;以 - 代表標準輸入。
-c:行首顯示計數-d:只秀重複行-u:只秀唯一行-f n:忽略前 n 欄位-s n:忽略前 n 字元sort [-bcdfimMnr] [-o 輸出檔] [-t 分隔字元] [-k 欄位] [檔案]
-b 忽略行首空白-d 字典序(只看英數與空白)-f 忽略大小寫-i 忽略非印刷字元-c 檢查是否已排序-m 合併已排序檔案-M 月份排序-n 數值排序-o 指定輸出檔-r 反向-t 自訂分隔字元-k 指定排序鍵# 統計詞頻並由高到低
sort data.txt | uniq -c | sort -nr
# 忽略大小寫去重
sort -f file.txt | uniq -i