Snapde一个全新的CSV超大文件编辑软件

今天介绍如果数据量超过104万行Excel无法打开了,用什么软件可以打开呢?Snapde,一个专门为编辑超大型数据量CSV文件而设计的单机版电子表格软件;它在C++语言开发的Snapman多人协作电子表格内核基础上进行了重新设计,换用C语言重新开发内核,比Snapman的电子表格核心有了质的提升,支持编辑数据从原来的的15兆CSV提升到了2.5G,原来编辑5万行就会很卡的,现在编辑一两千万行都不会卡。Snapde安装包15.4m(主要python语言的文件占用空间),主程序非常轻巧启动超快;下面来一些大文件CSV测试其性能(1个三百多兆,1个一个G,1个3.53G):

1、deputies_dataset.csv文件,文件大小325.98m,3014903行10列(30149030个单元格)

打开截图:

 打开时间花费:20秒

 内存占用497.8M:

 

2、ft_train.csv文件,文件大小1.05G,307512行903列(277683336个单元格)

 打开截图:

 

 打开时间花费:1分30秒

 内存占用2.8G:

 

 

3、yelp_review.csv文件,文件大小3.53G,5261669行10列(52616690个单元格)

 

 

 打开截图:

 打开时间花费:2分14秒

 内存占用4.09G:

 

 CSV文件是一种文本文件,我们使用世界上最厉害的文本编辑器之一:64位的notepade++对1G的ft_train.csv进行打开编辑,发现居然无法打开:

 

无论从轻巧、流畅上看,还是从上面对于大型CSV文件操作看,snapde都是一个很优秀的编辑器。

Snapde的下载网址:http://www.snapman.xyz

Snapde功能介绍页面:http://www.snapman.xyz/Snapde/help.php

posted @ 2018-08-18 19:51  feiren127  阅读(4796)  评论(0编辑  收藏  举报