2019年3月6日
java操作HDFS相关demo（TDH，kerberos认证）
摘要： public class Test { private static Configuration conf; private static FileSystem fs; //开启kerberos认证 static { System.setProperty("java.security.krb5.co 阅读全文
posted @ 2019-03-06 15:55 xiaolaotou 阅读(2834) 评论(1) 推荐(0) 编辑
HashMap和Hashtable的区别
摘要： 1、线程安全 两者最主要的区别在于Hashtable是线程安全，而HashMap则非线程安全 HashTable的实现方法里面都添加了synchronized关键字来确保线程同步，因此相对而言HashMap性能会高一些，我们平时使用时若无特殊需求建议使用HashMap,在多线程环境下若使用HashM 阅读全文
posted @ 2019-03-06 14:21 xiaolaotou 阅读(173) 评论(0) 推荐(0) 编辑
hadoop运行原理之shuffle
摘要： hadoop的核心思想是MapReduce，但shuffle又是MapReduce的核心。shuffle的主要工作是从Map结束到Reduce开始之间的过程。首先看下这张图，就能了解shuffle所处的位置。图中的partitions、copy phase、sort phase所代表的就是shuff 阅读全文
posted @ 2019-03-06 11:09 xiaolaotou 阅读(653) 评论(0) 推荐(0) 编辑
hadoop相关面试题3
该文被密码保护。 阅读全文
posted @ 2019-03-06 11:06 xiaolaotou 阅读(2) 评论(0) 推荐(0) 编辑
hadoop相关面试题2
该文被密码保护。 阅读全文
posted @ 2019-03-06 10:45 xiaolaotou 阅读(4) 评论(0) 推荐(0) 编辑
hadoop相关面试题
该文被密码保护。 阅读全文
posted @ 2019-03-06 10:33 xiaolaotou 阅读(3) 评论(0) 推荐(0) 编辑