摘要: 真正的学习是去探索,思考和重建 HDFS产生背景 ​ 随着数据量越来越大,在一个操作系统存不下所有的数据,那么就分配到更多的操作系统管理的磁盘中,但是不方便管理和维护,迫切需要一种系统来管理多台机器上的文件,这就是分布式文件管理系统。HDFS只是分布式文件管理系统中的一种。 HDFS定义 ​ HDF 阅读全文
posted @ 2020-07-02 16:42 focusbigdata 阅读(247) 评论(0) 推荐(0) 编辑
摘要: 知之为知之,不知为不知 Hadoop序列化 序列化概念 ​ 序列化就是把内存中的对象,转换成字节序列(或其他数据传输协议)以便于存储(持久化)和网络传输反序列化就是将收到字节序列(或其他数据传输协议)或者是硬盘的持久化数据,转换成内存中的对象。 序列化作用 ​ “活的”对象只生存在内存里,关机断电就 阅读全文
posted @ 2020-07-02 10:37 focusbigdata 阅读(353) 评论(0) 推荐(0) 编辑