2014 年 4月 22 日随笔档案 - risan

2014年4月22日

摘要：对于高频率使用的数据，用户可以将其放人某文件夹，然后向各个DataNode发出指示将其中的数据缓存在内存里。这种情况下，用户还可以利用一组zero-copy的API，同时由于不再需要反复验证数据完整性，可以显著提高计算效率。各DataNode的缓存由NameNode统一管理，周期性地向后者发... 阅读全文

posted @ 2014-04-22 23:03 risan 阅读(170) 评论(0) 推荐(0) 编辑

HDFS学习笔记3 -- 周边工具等

摘要： 1. Edit Viewer 用于将EditLog转换成各种可读文件的工具。2. Image Viewer 用于将FsImage转换成各种可读文件的工具。3. Quotas 分NameQuotas和SpaceQuotas两种。前者用于限制文件名及路径名的长度，后者用于限制某文件夹所能容纳的文件的大小... 阅读全文

posted @ 2014-04-22 22:24 risan 阅读(230) 评论(0) 推荐(0) 编辑