Board logo

标题: [文本处理] 批处理怎么实现快速的删除TXT重复行? [打印本页]

作者: xiaoxin3490    时间: 2019-7-1 16:19     标题: 批处理怎么实现快速的删除TXT重复行?

txt大概内大概有100W行
并且里边有大量的重复行,怎么可以删除重复行
重复行需要保留下一行
比如:
a
c
b
b
c
d
保留下
a
c
b
d
作者: Batcher    时间: 2019-7-1 19:00

试试看有没有能用的:

批处理如何删除文本文件中重复的行
http://bbs.bathome.net/thread-5219-1-1.html

批处理如何删除txt文本中的重复行
http://bbs.bathome.net/thread-5509-1-1.html

批处理去除超大文本中的重复行
http://bbs.bathome.net/thread-4690-1-1.html

批处理删除文本重复行时如何使用变量延迟扩展
http://bbs.bathome.net/thread-5326-1-1.html

批处理中sort命令如何过滤重复行
http://bbs.bathome.net/thread-4896-1-1.html




欢迎光临 批处理之家 (http://www.bathome.net/) Powered by Discuz! 7.2