sorting - 並べ替えおよび一意の csv ファイル

Question

Linuxコマンドを使用して、最初の列と2番目の列でソートした引用符付きのcsvファイルを持っています.1列目と2列目で一致する重複を削除したいのですが、どうすればよいですか? uniq では十分ではないようです。

Answer 1

ファイルをリバース (rev) してから、最初の N-2 フィールド (最初の 2 列を除くすべて) を無視して uniq し、再度 rev することができます。

rev | uniq -f N-2 -u | rev

Answer 2

さて、あなたが今必要としているものがよくわかりました。awkの使用はどうですか？

http://www.unix.com/shell-programming-scripting/62574-finding-duplicates-columns-removing-lines.html