摘要: 一、产生 Hadoop MapReduce诞生于搜索领域,主要解决搜索引擎面临的海量数据处理扩展性差的问题。二、MapReduce设计目标: 1. 易于编程:产痛的分布式程序设计非常复杂,用户需要关注的细节非常多,比如数据分片、数据传输、节点间通信等,因而设计分布式程序的门槛非常高。 2. 良... 阅读全文
posted @ 2015-04-21 15:15 cjt1991 阅读(325) 评论(0) 推荐(0) 编辑
摘要: Hadoop提供了一个加单的序列化框架API,用于集成各种序列化实现。该框架由Serialization实现。其中Serialization是一个接口,使用抽象工厂的设计模式,提供了一系列和序列化相关并相互依赖对象的额接口。通过Serialization应用可以获得类型的Serializer实例,即... 阅读全文
posted @ 2015-04-21 11:06 cjt1991 阅读(184) 评论(0) 推荐(0) 编辑