摘要: Java实现多线程有两种方法,一是继承Thread类,二是实现Runnable接口。继承Thread类继承Thread类,并重写Thread类中的run()方法。调用父类 Thread中start()方法启动线程。继承Thread类实例:public class Q { pu... 阅读全文
posted @ 2017-01-25 23:06 晚樨 阅读(124) 评论(0) 推荐(0) 编辑
摘要: Java中有几种我们常用的遍历数组或集合的方式,下面我来给大家简要总结一下这些遍历方式的各自的使用场景。一、for循环for循环的循环条件中定义了一个int类型的局部变量(变量名通常是i)。由于数组(Array)的元素可以通过角标访问,我们如果在循环体里得到了数组的角标,就可以对数... 阅读全文
posted @ 2017-01-25 17:00 晚樨 阅读(499) 评论(0) 推荐(0) 编辑
摘要: 匿名内部类的全称是Anonymous inner type。注意,这里的“类”指代的是“type”,而不是class这个关键字。抽象类和接口可以使用匿名内部类。这里是一个小的匿名内部类的demo:public class Q { public static void main... 阅读全文
posted @ 2017-01-25 16:14 晚樨 阅读(106) 评论(0) 推荐(0) 编辑
摘要: 相信各位读者们在运行Hadoop时或多或少的都会遇到一些很让人费解的警告,举个栗子: WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java ... 阅读全文
posted @ 2017-01-18 14:37 晚樨 阅读(127) 评论(0) 推荐(0) 编辑
摘要: 1.什么是Spark(官网:http://spark.apache.org) Spark是一种快速、通用、可扩展的大数据分析引擎,2009年诞生于加州大学伯克利分校AMPLab,2010年开源,2013年6月成为Apache孵化项目,2014年2月成为Apache顶级项目。目前,Spark... 阅读全文
posted @ 2017-01-03 14:41 晚樨 阅读(152) 评论(0) 推荐(0) 编辑
摘要: 1.安装zk集群 2.config/server.properties 添加zk地址:zookeeper.connect=node-1:2181,node-2:2181,node-3:2181 修改broker.id(唯一的):broker.id=0 3.启动 /bin/kafka-... 阅读全文
posted @ 2017-01-03 14:37 晚樨 阅读(130) 评论(0) 推荐(0) 编辑
摘要: Hadoop的HDFS HDFS设计思想 将数据存储到若干台单独的计算机上。 HDFS特点 1.存储超大文件 2.廉价硬件之上 3.一次写入,多次读取 HDFS架构 1.唯一的NameNode,唯一的SecondaryNameNode,都运行在主节点(master) 2.大于等于“1”个Da... 阅读全文
posted @ 2016-11-29 11:19 晚樨 阅读(235) 评论(0) 推荐(0) 编辑
摘要: Hadoop环境搭建 一、安装虚拟机:VMware Workstation 9 二、新建虚拟机,安装CentOS 6.8 64-bit系统,用户信息全部设置为“hadoop”(包括密码,用户名等等),网络信息选择NAT 三、修改主机名,vim /etc/sysconfig/network,HOS... 阅读全文
posted @ 2016-11-22 11:29 晚樨 阅读(149) 评论(0) 推荐(0) 编辑