【シェルコマンド】重複行を取り除く uniq、重複行のみを表示する uniq -d

qiita.com

uniqが有名なので、それを使う
事前にファイルの中身をソートしていないと使えない

重複行を取り除くとき

sort hoge.txt | uniq

重複行のみを表示したいとき

sort hoge.txt | uniq -d

ランキング参加中です

↓クリックしていただけると嬉しいです〜