摘要: SQL简单测试: 哪条SQL 语句可返回唯一不同的值 A.UNIQUE是完整性约束里的一种,如果某列的值需要是唯一的那么就添加UNIQUE约束Distinct是在查询时用的,若在SELECT的列选择列表中的某列说明为Distinct,那么查询出来的结果里,该列不会出现重复的值. B.unique是d 阅读全文
posted @ 2017-11-27 17:29 kevin&learn 阅读(774) 评论(0) 推荐(0) 编辑
摘要: 概述: 特点: 简单自然 平台可移植性 支持函数式编程 JIT编译 更好的并发编程 术语: JDK:Java development toolkit,是 Java 语言的软件开发工具包(SDK)。这里面包含了JAVA的运行环境(jre),JAVA工具(javac/java/jdb等)和JAVA基础的 阅读全文
posted @ 2017-11-27 11:09 kevin&learn 阅读(177) 评论(0) 推荐(0) 编辑
摘要: 搭建集群的问题: 问题1: 集群规划时某些节点过于复杂,主节点占用内存过大,造成集群有些点很卡的现象。重新规划集群后避免发生了此类问题。 问题2: 开始集群的操作都处于root账户下,后来发现这样做并不安全。于是新建了hadoop账户,作为我们的作业平台。 问题3: 集群的时间同步方面遇到问题,开始 阅读全文
posted @ 2017-11-27 09:54 kevin&learn 阅读(240) 评论(0) 推荐(0) 编辑
摘要: 问题1: java.net.ConnectException: Connection refused: no further information zookeeper.ClientCnxn: Session 0x0 for server null zookeeper未启动,或无法连接,从查看各节点 阅读全文
posted @ 2017-11-27 00:36 kevin&learn 阅读(2038) 评论(0) 推荐(0) 编辑
摘要: JavaAPI连接Hbase 准备工作: 确保集群各节点服务运行正常 确保zookeeper可以正常工作 已经开启hbase-master,hbase-regionserver 环境:windows7下eclipse,集群正常工作。 由于我们是在windows7下运行,所以我们将服务器中的hadoo 阅读全文
posted @ 2017-11-27 00:21 kevin&learn 阅读(8039) 评论(0) 推荐(1) 编辑
摘要: Resourcemanager的高可用: 然后两台机器分别启动resourcemanager即可 检查 高可用RM配置成功 阅读全文
posted @ 2017-11-26 22:23 kevin&learn 阅读(1371) 评论(0) 推荐(0) 编辑
摘要: Hbase的安装 修改regionservers(/home/hadoop/soft/hbase/conf) 启动hbase服务 阅读全文
posted @ 2017-11-26 22:14 kevin&learn 阅读(181) 评论(0) 推荐(0) 编辑
摘要: org.apache.hadoop.hbase.TableExistsException: hbase:namespace 在cdh版本下使用: 然后重新启动hbase服务即可。另一种方法: 阅读全文
posted @ 2017-11-24 21:52 kevin&learn 阅读(322) 评论(0) 推荐(0) 编辑
摘要: hadoop入门(面试需要) MapReduce简介:(参考) MapReduce执行过程: MapReduce原理: MapReduce执行步骤: map过程 每一个map可能会产生大量的输出,combiner的作用就是在map端对输出先做一次合并,以减少传输到reducer的数据量。 combi 阅读全文
posted @ 2017-11-23 21:46 kevin&learn 阅读(269) 评论(0) 推荐(1) 编辑
摘要: 项目集群Zookeeper安装: 对解压出来的 zookeeper-3.4.5-cdh5.3.6包重新命名 在另外两个点kslave6,kslave7上按照上述步骤配置zookeeper,并且设置标识分别为2,3 检查zookeeper状态: 如果检查出来的状态是一台机器zookeeper状态是le 阅读全文
posted @ 2017-11-22 15:57 kevin&learn 阅读(302) 评论(0) 推荐(0) 编辑