会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
DeDe
博客园
首页
联系
订阅
管理
公告
2011年10月5日
使用awk找出两个大文件的相同部分
摘要: 如果使用grep遇到了内存耗尽的问题,可尝试这个方法:awk 'NR==FNR{a[$1]}NR>FNR && ($1 in a){print $1}' a.txt b.txt > match.txt!!注意:如果a文件太大也可能存在内存耗尽的问题,这个时候尝试把文件a,b的位置互换。awk 'NR==FNR{a[$1]}NR>FNR && ($1 in a){print $1}' b.txt a.txt > match.txt
阅读全文
posted @ 2011-10-05 12:20 DeDe
阅读(1555)
评论(0)
推荐(0)
编辑
Powered by:
博客园
Copyright © 2024 DeDe
Powered by .NET 8.0 on Kubernetes