方法1：

awk '!x[$0]++' file.old >file.new

方法2：

sort -u -o file.new file.old

方法3：

nawk '!a[$0]' file.txt

方法4：

sort <filename> | uniq -u


注：方法1已试用 其他仅供参考！