思思博士

摘要： hadoop集群的搭建 搭建真正的zookeeper集群 Hbase需要安装在成功部署的Hadoop平台，并且要求Hadoop已经正常启动。 同时，HBase需要集群部署，我们分别把HBase 部署到主机：guoyansi128 guoyansi129 guoyansi130 1.下载hbase-1 阅读全文

摘要： 搭建zookeeper伪分布式集群 zookeeper是Hadop Ecosystem中非常重要的组件，它的主要功能是为分布式系统提供一致性协调服务， 提供的功能包括配置维护，域名服务，分布式同步和组服务。 zookeeper的目标就是封装好复杂易出错的关键服务，将简单易用的接口和性能高效，功能稳定 阅读全文

摘要： hive是什么：hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能(HQL) hive有什么用 1.通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析 2.可以用来进行 阅读全文

摘要： 继续上一篇博文：hadoop集群的搭建 1.将linux节点上的hadoop安装包从linux上下载下来（你也可以从网上直接下载压缩包，解压后放到自己电脑上） 我的地址是： 2.配置环境变量： HADOOP_HOME D:\hadoop-2.6.5 Path中添加：%HADOOP_HOME%\bin 阅读全文

摘要： 第一句：关闭防火墙，关闭防火墙，关闭所有节点的防火墙 1.安装虚拟机 2.虚拟机上安装centos7作为hadoop的主节点 1）修改主机名 清空里里面的内容;然后填写master 2）修改hosts 内容如下： 3.克隆出两个centos7作为hadoop的slave 1）分别修改主机名 清空里里 阅读全文

摘要： 集群从功能实现上分高可用和负载均衡： 高可用集群，即“HA"集群，也常称作“双机热备”。 当提供服务的机器宕机，备胎将接替继续提供服务； 实现高可用的开源软件有：heartbeat、keepalived。，keepalived还有负载均衡的功能。 核心原理都是通过心跳线连接两台服务器，一台用于提供服 阅读全文

摘要： 使用场景：mysql的实时备份或者读写分离。 环境： vmware虚拟机，并且安装了linux系统（我用的是centos7）,linux上安装了mysql 第一台mysql安装好了之后，将当前linux系统克隆一份。 我的两个linux系统的IP地址分别是128，129； 128为master,12 阅读全文

摘要： FS服务会经常用于在网络上共享存储。 比如有3台机子A,B,C;他们都需要访问同一个目录，使用NFS, 只需要把图片都放在A上，然后A共享给B和C即可。 访问B和C时，是通过网络的方式访问A上的哪个目录的； 服务端配置NFS 服务端：192.168.123.128 客户端：192.168.123.1 阅读全文

摘要： 首先看下面两个jdbc的url 一：jdbc.url=jdbc:oracle:thin:@100.2.194.200:1521/abc二：jdbc.url=jdbc:oracle:thin:@100.2.194.200:1521:abc3 数据库在架设的时候有一种叫做RAC (real applic 阅读全文

摘要： typeHandler作用： 1.传参时将javaType类型转换成jdbcType 2.结果集中ResultSet中取值时，jdbcType转换为javaType; 系统自定义的typeHandler: mybatis系统内部定义了一系列的typeHandler；基本涵盖了我们正常使用的类型转换； 阅读全文