Snapde一个全新的CSV超大文件编辑软件
今天介绍如果数据量超过104万行Excel无法打开了,用什么软件可以打开呢?Snapde,一个专门为编辑超大型数据量CSV文件而设计的单机版电子表格软件;它在C++语言开发的Snapman多人协作电子表格内核基础上进行了重新设计,换用C语言重新开发内核,比Snapman的电子表格核心有了质的提升,支持编辑数据从原来的的15兆CSV提升到了2.5G,原来编辑5万行就会很卡的,现在编辑一两千万行都不会卡。Snapde安装包15.4m(主要python语言的文件占用空间),主程序非常轻巧启动超快;下面来一些大文件CSV测试其性能(1个三百多兆,1个一个G,1个3.53G):
1、deputies_dataset.csv文件,文件大小325.98m,3014903行10列(30149030个单元格)
打开截图:
打开时间花费:20秒
内存占用497.8M:
2、ft_train.csv文件,文件大小1.05G,307512行903列(277683336个单元格)
打开截图:
打开时间花费:1分30秒
内存占用2.8G:
3、yelp_review.csv文件,文件大小3.53G,5261669行10列(52616690个单元格)
打开截图:
打开时间花费:2分14秒
内存占用4.09G:
CSV文件是一种文本文件,我们使用世界上最厉害的文本编辑器之一:64位的notepade++对1G的ft_train.csv进行打开编辑,发现居然无法打开:
无论从轻巧、流畅上看,还是从上面对于大型CSV文件操作看,snapde都是一个很优秀的编辑器。
Snapde的下载网址:http://www.snapman.xyz
Snapde功能介绍页面:http://www.snapman.xyz/Snapde/help.php