2017年11月14日
hadoopMR自定义输入格式
摘要： 输入格式 1、输入分片与记录 2、文件输入 3、文本输入 4、二进制输入 5、多文件输入 6、数据库格式输入 详细的介绍：https://blog.csdn.net/py_123456/article/details/79766573 1、输入分片与记录 1、JobClient通过指定的输入文件的格 阅读全文
posted @ 2017-11-14 13:19 ccdh 阅读(1347) 评论(0) 推荐(0) 编辑
hadoopMR自定义输入类型
摘要： hadoop中的输入输出数据类型： BooleanWritable:标准布尔型数值 ByteWritable:单字节数值 DoubleWritable:双字节数值 FloatWritable:浮点数 常用的： IntWritable:整型数 LongWritable:长整型数 Text:使用UTF8 阅读全文
posted @ 2017-11-14 11:03 ccdh 阅读(480) 评论(0) 推荐(0) 编辑
轻量级RPC
摘要： ①自定义一个协议接口继承VersionedProtocol ②自定义协议类实现上面的接口，完善功能需求 ③服务端 ④客户端 二：模拟一个namenode 阅读全文
posted @ 2017-11-14 09:40 ccdh 阅读(131) 评论(0) 推荐(0) 编辑