在Linux系統中,可以使用以下方法去除重復行:
sort file.txt | uniq > newfile.txt
awk '!seen[$0]++' file.txt > newfile.txt
sed '$!N; /^\(.*\)\n\1$/!P; D' file.txt > newfile.txt
以上是幾種常見的去除重復行的方法,你可以根據具體情況選擇適合自己的方法進行操作。
億速云公眾號
手機網站二維碼
Copyright ? Yisu Cloud Ltd. All Rights Reserved. 2018 版權所有
廣州億速云計算有限公司粵ICP備17096448號-1 粵公網安備 44010402001142號增值電信業務經營許可證編號:B1-20181529