uniqコマンドの説明します。
説明
uniqは、重複業を削除するコマンドです。
使い方：uniq
読み方：ユニーク
略：なし
具体例
＃ ■■■ １．事前準備
＃ 作業ディレクトリ作成
[root@CE08PRD101 ~]# mkdir -p /work/uniq;cd /work/uniq;pwd
/work/uniq
＃ テストファイル作成
[root@CE08PRD101 uniq]# cat << EOS > uniq_test.txt
cat
dog
birt
dog
fish
cat
cat
horse
cat
EOS
＃ ファイルの中身を確認
[root@CE08PRD101 uniq]# cat uniq_test.txt
cat
dog
birt
dog
fish
cat
cat
horse
cat
＃ ■■■ ２．ファイルの中身から重複業を削除して表示する
[root@CE08PRD101 uniq]# sort uniq_test.txt | uniq
birt
cat
dog
fish
horse
＃ ■■■ ３．事後作業
＃ 作業ディレクトリ削除
[root@CE08PRD101 uniq]# cd ../;rm -fr uniq