摘要: HDFS在InputFormat(将data转换为)等支持下,将数据块传入MAPPER中,MAPPER输出到内存,如果发生spill则存入本地文件, 形成较大文件region(可能有combine发生)。之后的去向分为两种,一种是本机有reduce,则加入到reduce的内存中;另外一种是远程复... 阅读全文
posted @ 2015-12-08 15:53 Craig.Q 阅读(207) 评论(0) 推荐(0) 编辑
摘要: 最近在研究利用javacv在HADOOP上跑视频文件截图以及对截图的分析应用,检验HA配置的效果,也学习下javacv图片处理。在一个地方卡了很久:如何将一个二进制流送到IplImage对象。经过分析,发现只要想办法将一个image转化成bufferedimage就可以了。 阅读全文
posted @ 2015-12-08 15:47 Craig.Q 阅读(1211) 评论(0) 推荐(0) 编辑