摘要: 最近申请使用EC2免费服务器,将EC2使用时的一些心得记录下。 一、申请流程: 1、首先需要注册一个账户,此账户免费,但是申请账户的时候需要绑定信用卡,在绑定后申请EC2云服务器的时候,aws为了测试账户可用性,象征性的扣去信用卡1美元,下个月自动返回到你自己的账户。 申请地址:https://aw 阅读全文
posted @ 2018-08-19 17:28 KevinZhyp 阅读(1046) 评论(0) 推荐(0) 编辑
摘要: 一、项目创建 1、IDEA创建springboot项目 1.1、File-->new-->project 注意:IDEA需要选择最终版本的,社区版本的没有spring initializ选项。 SDK选择Java默认,URL选择默认。 1.2、配置名称 1.3、选择常用到的技术,因为做的是web项目 阅读全文
posted @ 2018-06-06 17:08 KevinZhyp 阅读(1689) 评论(0) 推荐(0) 编辑
摘要: sqoop1 1、使用Sqoop导入MySQL数据到HDFS 2、使用Sqoop导入MySQL数据到Hive中 3、使用Sqoop导入MySQL数据到Hive中,并且指定表名 4、使用Sqoop导入MySQL数据到Hive中,并使用where条件 5、使用Sqoop导入MySQL数据到Hive中,并 阅读全文
posted @ 2018-05-30 09:30 KevinZhyp 阅读(2093) 评论(0) 推荐(0) 编辑
摘要: 概述:Hive集成HBase可以有效利用HBase数据库的存储特性,如行更新和列索引等。在集成的过程中注意维持HBase jar包的一致性。Hive与HBase的整合功能的实现是利用两者本身对外的API接口互相进行通信,相互通信主要是依靠hive_hbase-handler.jar工具类。 整合hi 阅读全文
posted @ 2018-05-21 15:48 KevinZhyp 阅读(3232) 评论(0) 推荐(0) 编辑
摘要: 1、注册coding账号。 2、安装git,地址:https://git-scm.com/downloads。 2.1:安装完成后,右键输入 :ssh-keygen -t rsa -C "123456@qq.com"(自己的git账号)。 2.2:将生成的文件拷贝至: 保存就OK。 3、并绑定cod 阅读全文
posted @ 2018-03-14 16:02 KevinZhyp 阅读(6189) 评论(0) 推荐(0) 编辑
摘要: 1、介绍 Hbase中命名空间类似于传统数据库RDBMS中的:库,方便对表进行业务上的划分。在hbase从0.98.0,0.95.2开始支持namespace级别的授权操作。hbase的全局管理员可以进行namespace的授权操作(创建、修改和回收)。 2、namespace HBase系统默认定 阅读全文
posted @ 2017-12-20 11:28 KevinZhyp 阅读(2526) 评论(0) 推荐(0) 编辑
摘要: 1、zookeeper操作相关命令: 2、hdfs操作相关命令: 3、yarn操作相关命令: 4、hive相关操作命令: 5、hbase操作相关命令: 阅读全文
posted @ 2017-11-24 11:54 KevinZhyp 阅读(381) 评论(0) 推荐(0) 编辑
摘要: 1、环境介绍: 都在root用户权限下设置时间同步 标准时钟同步 3台设备 192.168.9.128 主节点 ntpd服务器,用于与外部公共ntpd同步标准时间 192.168.9.129 备用主节点 ntpd客户端,用于与ntpd同步时间 192.168.9.130 子节点 ntpd客户端,用于 阅读全文
posted @ 2017-11-23 12:36 KevinZhyp 阅读(5939) 评论(0) 推荐(0) 编辑
摘要: 1、创建项目:File-->new-->Project; 2、选择maven,SDK选择自己的Java安装路径; 3、这个随意了,写个比较有意义的就行,然后就按照图片操作。 4、上图点击finish后,出现下面的pom.xml,这个就是后续需要mvn依赖的地方。 5、我的hadoop版本是:CDH的 阅读全文
posted @ 2017-11-23 11:45 KevinZhyp 阅读(8216) 评论(0) 推荐(0) 编辑