[新手上路]批处理新手入门导读[视频教程]批处理基础视频教程[视频教程]VBS基础视频教程[批处理精品]批处理版照片整理器
[批处理精品]纯批处理备份&还原驱动[批处理精品]CMD命令50条不能说的秘密[在线下载]第三方命令行工具[在线帮助]VBScript / JScript 在线参考
返回列表 发帖

[文本处理] 批处理从多个文件中读取这两行之间的内容如何提高效率?

本帖最后由 soarhu 于 2019-1-17 13:03 编辑

现在有10个文件(名字:file_name_c1, file_name_c2,....,file_name_c10 ),每个文件size大概为1M ~ 50M。
每个文件都包含这两行,
其中一行包含   BUFFER POOL AND
另外一行包含    DATABASE USAGE
从这些文件中读取这两行之间的内容,添加一行文字来作为分隔,另存为一个新文件。
我根据帮助文档和bathome.net写了一个批处理,能够运行,
目前的问题效率较低(现在需要5分钟时间),不知诸位有何建议来改进提高效率,提前谢谢诸位的关注和帮助,欢迎点评和建议!
  1. @echo off on & setlocal enabledelayedexpansion
  2. cls
  3. set new_name=newf01
  4. for /L %%i in (1,1,10) do (
  5. set /a cc_i=%%i
  6. call :next !cc_i!  
  7. )
  8. goto :eof
  9. :next
  10. @echo off
  11. set file_name=pf_s%1.f01
  12. for /F " delims=" %%i in (%file_name%) do (
  13. set "s=%%i"
  14. if not "!s:BUFFER POOL AND=!" == "!s!" (set flag=) else if defined flag echo;!s!>>%new_name%.txt
  15. if not "!s:DATABASE USAGE=!" == "!s!" set "flag=1"   
  16. if not "!s:DATABASE USAGE=!" == "!s!" echo ---%~dp0 --- %file_name% --- %date% --- >>%new_name%.txt  
  17. )
复制代码
编辑添加 goto :eof


希望生成的新文件格式如下:

---file_path--- file_name1 --- date ---  
text between line_keyword_a and line_keyword_b  in file1  
---file_path--- file_name2--- date ---  
text between line_keyword_a and line_keyword_b  in file2  
---file_path--- file_name3--- date ---  
text between line_keyword_a and line_keyword_b  in file3
...
...
...
---file_path--- file_name10--- date ---  
text between line_keyword_a and line_keyword_b  in file10
学习批处理,休息一下午

稍微修改一下,在第九行之后和:next之前添加一行
goto :eof
学习批处理,休息一下午

TOP

试试这样需要几分钟:
  1. @echo off
  2. setlocal enabledelayedexpansion
  3. set "new_name=newf01"
  4. for /l %%i in (1,1,10) do (
  5.     set cc_i=%%i
  6.     call :next !cc_i!
  7. )
  8. goto :eof
  9. :next
  10. set file_name=pf_s%1.f01
  11. (for /f "delims=" %%i in (%file_name%) do (
  12.     set "s=%%i"
  13.     if not "!s:BUFFER POOL AND=!" == "!s!" (
  14.         set flag=
  15.     ) else if defined flag (
  16.         echo,!s!
  17.     )
  18.     if not "!s:DATABASE USAGE=!" == "!s!" (
  19.         set "flag=1"
  20.     )
  21.     if not "!s:DATABASE USAGE=!" == "!s!" (
  22.         echo ---%~dp0 --- %file_name% --- %date% ---
  23.     )
  24. ))>>"%new_name%.txt"
复制代码
1

评分人数

    • soarhu: 极大地提高了效率!++赞👍技术 + 1
我帮忙写的代码不需要付钱。如果一定要给,请在微信群或QQ群发给大家吧。
【微信公众号、微信群、QQ群】http://bbs.bathome.net/thread-3473-1-1.html
【支持批处理之家,加入VIP会员!】http://bbs.bathome.net/thread-67716-1-1.html

TOP

回复 2# soarhu


    可以点击楼层左下角的“编辑”
我帮忙写的代码不需要付钱。如果一定要给,请在微信群或QQ群发给大家吧。
【微信公众号、微信群、QQ群】http://bbs.bathome.net/thread-3473-1-1.html
【支持批处理之家,加入VIP会员!】http://bbs.bathome.net/thread-67716-1-1.html

TOP

更新

本帖最后由 yhcfsr 于 2019-1-16 23:45 编辑
  1. @echo off
  2. set "new_name=newf01.txt"
  3. for /L %%i in (1,1,10) do if exist "pf_s%%i.f01" call :next "pf_s%%i.f01"
  4. pause&exit
  5. :next
  6. setlocal enabledelayedexpansion
  7. (for /F "delims=" %%i in ('type "%~1"') do (
  8.     set "str=%%i"
  9. if "!str:DATABASE USAGE=!" neq "!str!" goto :break
  10. if "!str:BUFFER POOL AND=!" neq "!str!" (set "begin=1") else if defined begin echo;!str!
  11. ))>>"%new_name%"
  12. :break
  13. endlocal
复制代码
QQ 33892006

TOP

回复 5# yhcfsr


    如果文件中存在 ! 符号,会被丢弃!!!
1

评分人数

    • 523066680: 你不是人造革,你是真的皮PB + 6

TOP

本帖最后由 yhcfsr 于 2019-1-16 22:51 编辑

回复 6# WHY

题主都说这么用可以实现,只是差点效率.所以我也就偷懒了.
如果要避免!号的问题,我看只能混编了
QQ 33892006

TOP

本帖最后由 soarhu 于 2019-1-16 23:01 编辑

回复 3# Batcher

非常感谢Batch的关注和热心回复,
经过单次测试,好消息是新的Batcher大概快一分钟。

有个问题,只输出了最后一个的内容。可能是哪里有些许问题。

再次感谢!

Batcher
学习批处理,休息一下午

TOP

回复 6# WHY

非常感谢指出这个问题!
目前,!不是问题。需要提取的内容当中不包含符号!
可能有*** ---- 等符号。

感谢Bahome高手热心指点!
学习批处理,休息一下午

TOP

回复 5# yhcfsr


这一改进简单测试,不可运行,提示错误
The filename, directory name, or volume label syntax is incorrect.
我认为可能是我的目录中含有下划线的原因。
但是放到没有特殊字符的目录下,有同样的错误出现。暂时未能运行。如果了解原因,请告知,

谢谢你对这一问题的关注和热心回复。
学习批处理,休息一下午

TOP

回复 4# Batcher


嗯,    谢谢,已经改正
学习批处理,休息一下午

TOP

回复 8# soarhu


    请详细说明一下“只输出了最后一个的内容”
我帮忙写的代码不需要付钱。如果一定要给,请在微信群或QQ群发给大家吧。
【微信公众号、微信群、QQ群】http://bbs.bathome.net/thread-3473-1-1.html
【支持批处理之家,加入VIP会员!】http://bbs.bathome.net/thread-67716-1-1.html

TOP

本帖最后由 yhcfsr 于 2019-1-16 23:49 编辑

回复 10# soarhu
5楼代码我稍微改了下,根据实际情况,修改第4行两处引号内与文件名相关的地方.
  1. @echo off
  2. set "new_name=newf01.txt"
  3. for /L %%i in (1,1,10) do if exist "pf_s%%i.f01" call :next "pf_s%%i.f01"
  4. pause&exit
  5. :next
  6. setlocal enabledelayedexpansion
  7. (for /F "delims=" %%i in ('type "%~1"') do (
  8.     set "str=%%i"
  9. if "!str:DATABASE USAGE=!" neq "!str!" goto :break
  10. if "!str:BUFFER POOL AND=!" neq "!str!" (set "begin=1") else if defined begin echo;!str!
  11. ))>>"%new_name%"
  12. :break
  13. endlocal
复制代码
QQ 33892006

TOP

本帖最后由 soarhu 于 2019-1-17 13:04 编辑

回复 12# Batcher


前面的文件都没有输出,最后仅输出了最后一个文件的两行之间的内容。
嗯,具体原因稍晚我会再研究一下。如果有新发现,请告知。谢谢

---file_path--- file_name10--- date ---  
text between line_keyword_a and line_keyword_b  in file10
学习批处理,休息一下午

TOP

回复 13# yhcfsr


嗯,感谢小修改,稍晚我会试一下。
学习批处理,休息一下午

TOP

返回列表