2017年7月21日
BigData 学习记录（四）
摘要： HDFS的IO操作 1.数据完整性 为了保证数据的完整性，一般采用数据校验技术： 1、奇偶校验技术 2、md5，sha1等校验技术 3、CRC-32循环冗余校验技术 4、ECC内存纠错校验技术HDFS数据完整性 1、HDFS以透明方式校验所有写入的数据，可以通过io.bytes.per.checks 阅读全文
posted @ 2017-07-21 09:00 学习记录_Lxb 阅读(141) 评论(0) 推荐(0) 编辑