Python和HDF 5大数据应用

 

Python和HDF 5大数据应用

大数据集处理Python mmap 内存映射与numpy 内存映射!

HDF5

 

 

https://www.pythonforthelab.com/blog/introduction-to-storing-data-in-files/

https://towardsdatascience.com/data-science-project-flow-for-startups-282a93d4508d

 

h5py 非常注意对象的命名!

 

 

http://deeplearning.net/software/pylearn2/large_data.html

 

https://docs.python.org/3.5/library/mmap.html

 

说明:mmap是一种虚拟内存映射文件的方法,即将一个文件或者其它对象映射到进程的地址空间,实现文件磁盘地址和进程虚拟地址空间中一段虚拟地址的一一对映关系。关于系统中mmap的理论说明可以看百度百科和维基百科说明以及mmap函数介绍,这里的说明是针对在Python下mmap模块的使用说明。 

 

秉着CSDN赚积分的原则(被逼无奈,本人较懒,通常花钱买,CSDN让人越来越买不起了),然而有空白页,一点一滴的制作了该电子书:

从某网站花费近20大洋够得,并花费一小时以上第一次原创制作了电子书(遇到大问题并解决了)。

这种大数据与spark圈所指大数据时有区别的!欢迎下载!

================================================================================= 

因为写了上面那段话无耻的CSDN居然把我的资源给弄没了,连审核未通过的信息都免了!!

下载地址获取方式: wdmx666@126.com

posted @ 2019-01-06 21:10  Lucas_Yu  阅读(1408)  评论(0编辑  收藏  举报