摘要： 在大数据领域，安全永远是一个绕不开的话题。 对于一个简单安装的hadoop集群，我们认为有如下安全隐患： 1、可以人为添加一个客户端节点，并以此假冒的客户来获取集群数据。 对于一个假冒的客户端节点，成功加入集群就能够伪装 datanode 让得到 namenode 指派的任务和数据。 2、创建hdf 阅读全文

摘要： 1、纠删码存储技术 CDH6主要集成打包了Hadoop3，包括Hadoop3的一些新特性的官方支持，比如纠删码等。纠删码可以将HDFS的存储开销降低约50%，同时与三份副本策略一样，还可以保证数据的可用性。 副本方式： 默认情况下，HDFS的数据块都会保存三个副本。副本方式是一种容忍磁盘故障简单而有 阅读全文