あるファイルに重複する行が無いかチェックしたい
結論
cat あるファイル | sort | uniq -c | awk '$1 > 1'
解説
sortしてuniq -cすることで、1列目に出現回数、2列目に内容が出力される。 awkで1列目が2以上になっている行(=重複した行)を取り出してる。
cat あるファイル | sort | uniq -c | awk '$1 > 1'
sortしてuniq -cすることで、1列目に出現回数、2列目に内容が出力される。 awkで1列目が2以上になっている行(=重複した行)を取り出してる。