PowerShell过滤文件中的重复内容

 

Get-Content -Path E:\test11\data.txt | Sort-Object | Get-Unique

 

源文件：

AA0001 2014-06-30 15:27:13.073
AA0001 2014-06-30 15:27:13.073
AA0001 2014-06-30 15:27:13.073
AA0002 2014-06-30 15:27:30.607
AA0002 2014-06-30 15:28:00.467
AA0003 2014-06-30 15:28:20.297
AA0003 2014-06-30 15:28:20.297

过滤后：

AA0001 2014-06-30 15:27:13.073
AA0002 2014-06-30 15:27:30.607
AA0002 2014-06-30 15:28:00.467
AA0003 2014-06-30 15:28:20.297

过滤后，另存为新的文件，可以这样：

Get-Content -Path E:\test11\data.txt | Sort-Object | Get-Unique | Out-File -FilePath E:\test11\NewData.txt

 

 

 

posted @   ok_008  阅读(918)  评论(0)  编辑  收藏  举报
编辑推荐：
· 如何编写易于单元测试的代码
· 10年+ .NET Coder 心语，封装的思维：从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热？
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列：向量存储与相似性搜索在 .NET 中的实现
阅读排行：
· 10年+ .NET Coder 心语 ── 封装的思维：从隐藏、稳定开始理解其本质意义
· 地球OL攻略 —— 某应届生求职总结
· 提示词工程——AI应用必不可少的技术
· Open-Sora 2.0 重磅开源！
· 周边上新：园子的第一款马克杯温暖上架
给我写信
点击右上角即可分享
微信分享提示
SQL AI 助手