摘要： 1.Writable简单介绍在前面的博客中，经常出现IntWritable，ByteWritable.....光从字面上，就可以看出，给人的感觉是基本数据类型 和 序列化！在Hadoop中自带的org.apache.hadoop.io包中有广泛的Writable类可供选择。它们的层次结构如下图所示：... 阅读全文

摘要： 1.WritableComparable查看HadoopAPI,如图所示：WritableComparable继承自Writable和java.lang.Comparable接口，是一个Writable也是一个Comparable，也就是说，既可以序列化，也可以比较！再看看它的实现类，发现Boole... 阅读全文

摘要： 1.序列化 所谓的序列化，就是将结构化对象转化为字节流，以便在网络上传输或是写道磁盘进行永久存储。反序列化，就是将字节流转化为结构化对象。在Java中也存在序列化，刚学Java的时候，接触的第一个项目就是QQ聊天系统，也就是网络编程，其中，用到的就是字符流传输数据，通过对象序列化，然后转化为字符流或... 阅读全文

摘要： 1.压缩和输入分片 Hadoop中文件是以块的形式存储在各个DataNode节点中，假如有一个文件A要做为输入数据，给MapReduce处理，系统要做的，首先从NameNode中找到文件A存储在哪些DataNode中，然后，在这些DataNode中，找到相应的数据块，作为一个单独的数据分块，作为ma... 阅读全文

摘要： 1.CompressionCodecFactory简介 当在读取一个压缩文件的时候，可能并不知道压缩文件用的是哪种压缩算法，那么无法完成解压任务。在Hadoop中，CompressionCodecFactory通过使用其getCodec()方法，可以通过文件扩展名映射到一个与其对应的Compress... 阅读全文

摘要： 1.文件压缩简单说明 文件压缩有两大好处：可以减少文件存储所需要的磁盘空间，其次是可以加快数据在网络和磁盘上的传输。windows上的压缩算法有好多中，rar，zip等等，同理，在Hadoop中，压缩算法也有多种，下面是Hadoop中常见的压缩算法。压缩格式总结压缩格式工具算法文件扩展名是否包含... 阅读全文

摘要： 从看《Hadoop权威指南》第一眼开始，我一直觉得Hadoop很难，很难.....看着这本书，我觉得好像是文言文，我是真的看不懂，我的一腔热血瞬间冷了下来！很幸运，但是也不幸运，我来到了一个小公司！幸运的是，我接触到了云，不幸运的是这并不是我想要的云。我曾经告诉过自己：我今后做事要当机立断，对于一些... 阅读全文

摘要： 1.简介vCenter Server Heartbeat为VMware vCenter Server提供关键任务高可用性，保护虚拟基础架构免受硬件、网络、配置等的影响，基于Windows的服务，可为vCenter Server配置提供高可用性的保护，且无需专用硬件。vCenter Server He... 阅读全文

摘要： 1.vCenter是什么？vCenter Server 是 vSphere管理员使用的主要管理工具，首先，通过它可实现对数据中心所有主机的单点控制，也就是提供集中式管理。其次，提供基本的基础结构操作，如清单、拓扑结构和主机配置管理，调配，性能监控，创建用户和权限，还有就是统一物理资源以便在虚拟机之间... 阅读全文

摘要： 1.vSphere5.5体系结构 vSphere5.5作为云集算操作系统，可以虚拟化服务器、存储、网络在内的整个IT基础架构，将这些架构转化为易于管理的虚拟化！vSphere5.5从逻辑上，可以划分为虚拟化层、管理层、界面层。虚拟化层包含了基础架构服务和应用服务，基础架构服务主要用于对基础话硬件进... 阅读全文