> > その重複行を消すのを自動でやりたい
> ﾃｷｽﾄに落としてuniq

こうだな
% sort -k 2 hoge | uniq -f 1

参考：2006/09/16(土)21時20分18秒