注册 登录  
 加关注
   显示下一条  |  关闭
温馨提示!由于新浪微博认证机制调整,您的新浪微博帐号绑定已过期,请重新绑定!立即重新绑定新浪微博》  |  关闭

天朝布衣田中码农参上

苦逼码农的点点滴滴,请多多指教!

 
 
 

日志

 
 
 
 

批处理删除文本文件重复行  

2017-06-08 10:56:07|  分类: 操作系统 |  标签: |举报 |字号 订阅

  下载LOFTER 我的照片书  |
在某些情况下,我们需要处理一些文件文件中重复行,但是又没必要为此大动干戈,祭起编程这个大杀器。所以可以利用DOS命令findstr或find来变相完成这种功能。
相关批处理代码如下【保存后辍为bat或cmd文件,将想要处理的TXT拖动到这个文件上即可】:

@echo off
for /f "delims=" %%i in (%1) do (
REM 利用findstr功能将相关行在目录文件中查找,如不存在就写入新文件
findstr "%%i" "%~n1_去重复.txt">nul || echo %%i)>>%~n1_去重复.txt
REM 另外一种写法是利用find
REM find /i "%%i" "%~n1_去重复.txt">nul || echo %%i)>>%~n1_去重复.txt
)

非常的简单,这里也不多说,只是用个例子来示范下。有如下文本【data.txt】

www.593668.com
www.237h.com
www.9zfx.com
www.9zfx.com
www.593668.com
www.237h.com

将其拖动到生成的批处理文件上,就会生成一个加了_去重复的文件。演示页面如下:
批处理删除文本文件重复行 - sinsunson - 天朝布衣田中码农参上
有了这个基础,大家还可以加入排序什么的【用sort命令】,让这个脚本功能更加强大。
  评论这张
 
阅读(1)| 评论(0)
推荐 转载

历史上的今天

在LOFTER的更多文章

评论

<#--最新日志,群博日志--> <#--推荐日志--> <#--引用记录--> <#--博主推荐--> <#--随机阅读--> <#--首页推荐--> <#--历史上的今天--> <#--被推荐日志--> <#--上一篇,下一篇--> <#-- 热度 --> <#-- 网易新闻广告 --> <#--右边模块结构--> <#--评论模块结构--> <#--引用模块结构--> <#--博主发起的投票-->
 
 
 
 
 
 
 
 
 
 
 
 
 
 

页脚

网易公司版权所有 ©1997-2018