ファイルから重複した行を削除する方法は?

ファイルから重複した行を削除する方法は?

文書、

TABLE1  
-------  
1234

TABLE1  
-------  
9555  

TABLE1  
-------  
87676  

TABLE1
-------  
2344

私が望む出力は次のとおりです。

TABLE1  
-------  
1234
9555  
87676
2344

ベストアンサー1

sedこれは以下を使用するライナーですawk

sed '/^$/d'ファイル名| awk '!a[$1]++'

grepと次の組み合わせawk

grep。ファイル名| awk '!a[$1]++'

ように @カス提案された内容は、awk単一のコマンドでこれを行うこともできます。

awk '!x[$1]++ && ! /^[[:blank:]]*$/' ファイル名

おすすめ記事