[新手上路]批处理新手入门导读[视频教程]批处理基础视频教程[视频教程]VBS基础视频教程[批处理精品]批处理版照片整理器
[批处理精品]纯批处理备份&还原驱动[批处理精品]CMD命令50条不能说的秘密[在线下载]第三方命令行工具[在线帮助]VBScript / JScript 在线参考
返回列表 发帖
comicguests

Rank: 3Rank: 3

帖子
136 
积分
219 
技术
0  
捐助
0  
注册时间
2011-2-14 
1楼 跳转到 » 倒序看帖
打印
tT
发表于 2011-9-12 10:52 | 只看该作者

[文本处理] 批处理怎样查找文本中的重复行或重复段落？

刚才搜索了一下，没找到有用内容，只好又来请教了...

有一些txt格式的文档，但里面有一些重复行或重复段落，有故意重复的，但大多是录入时搞重复了，
我想将这些重复行或重复段落查找出来，并写入到a.txt中，之后自己根据a.txt里的信息手动删就可以了。
多谢！！！
收藏 分享

Seder

Rank: 2

帖子
99 
积分
112 
技术
7  
捐助
0  
注册时间
2011-9-2 
2楼
发表于 2011-9-12 10:55 | 只看该作者
方便把文本贴出来吗？

TOP

Batcher

Rank: 12Rank: 12Rank: 12

帖子
14940 
积分
46147 
技术
857  
捐助
745  
注册时间
2008-6-9 
3楼
发表于 2011-9-12 11:36 | 只看该作者
什么是有用的内容？

批处理如何删除文本文件中重复的行
http://bbs.bathome.net/thread-5219-1-1.html

批处理如何删除txt文本中的重复行
http://bbs.bathome.net/thread-5509-1-1.html

批处理去除超大文本中的重复行
http://bbs.bathome.net/thread-4690-1-1.html

批处理删除文本重复行时如何使用变量延迟扩展
http://bbs.bathome.net/thread-5326-1-1.html

批处理中sort命令如何过滤重复行
http://bbs.bathome.net/thread-4896-1-1.html
我帮忙写的代码不需要付钱。如果一定要给，请在微信群或QQ群发给大家吧。
【微信公众号、微信群、QQ群】http://bbs.bathome.net/thread-3473-1-1.html
【支持批处理之家，加入VIP会员！】http://bbs.bathome.net/thread-67716-1-1.html

TOP

comicguests

Rank: 3Rank: 3

帖子
136 
积分
219 
技术
0  
捐助
0  
注册时间
2011-2-14 
4楼
发表于 2011-9-12 13:28 | 只看该作者
回复 3# Batcher

我没找到这么多，刚才看了一下，基本是批处理找到重复行后就给他删除了，我是想把找到的重复内容写入到新建文档中，自行处理（毕竟不能保证它不会误删）
基本上，重复字词超过十个就可以视为重复段了，然后在a.txt中显示重复段的前十个字就可以了.

还有，我不能给出文本内容，并不是保密什么的，因为我也不知道哪里重了....

TOP

返回列表