uniqコマンド
sort済みであることが前提なのでsortコマンドと組み合わせて使う
$ sort hoge.csv | uniq
-d
重複する行だけ表示
-u
重複しない行だけ表示
-D
重複するとみなされたすべての行を表示