11 2017 档案
摘要:如何使用 Zookeeper 作为一个分布式的服务框架,主要用来解决分布式集群中应用系统的一致性问题,它能提供基于类似于文件系统的目录节点树方式的数据存储,但是 Zookeeper 并不是用来专门存储数据的,它的作用主要是用来维护和监控你存储的数据的状态变化。通过监控这些数据状态的变化,从而可以达到
阅读全文
摘要:第一部分: Zookeeper 简介 Zookeeper 是 Google 的 Chubby一个开源的实现,是 Hadoop 的分布式协调服务 自2010年10月升级成Apache Software Foundation(ASF)顶级项目 分布式协调服务,提供以下功能: 组管理服务 分布式配置服务
阅读全文
摘要:原文地址:https://www.cnblogs.com/linlemo/p/4807178.html 公司里面在拿Zookeeper做命名服务,通过使用ZK,前端只需要根据指定的ZK地址获得相应的资源或服务的后端服务器地址即可,而后端服务器需要做的仅仅是将自己的地址注册到ZK上作为一个Epheme
阅读全文
摘要:原文地址:http://blog.csdn.net/xiaolang85/article/details/13021339 ZooKeeper服务命令 在准备好相应的配置之后,可以直接通过zkServer.sh 这个脚本进行服务的相关操作 1. 启动ZK服务: sh bin/zkServer.sh
阅读全文
摘要:执行./hive命令后,进入CLI(shell)模式; 1、创建数据库,语句: create database school; 2、展示所有的数据库,语句: show databases; 3、选择使用的数据库,语句: use school; 4、创建表语句(简单),语句: create table
阅读全文
摘要:原文地址:http://www.cnblogs.com/swpk/p/3566536.html?utm_source=tuicool jersey 是oracle 出的一个较好的REST框架。使用此框架方便地为我们架设Rest服务。它可以作为一个数据接口的框架,根据配置及请求参数,可灵活地返回不同格
阅读全文
摘要:安装数据库模块 Mysql和Mysql-server#yum install mysql mysql-server 开启mysql服务#systemctl start mysqld.service同样可以通过netstat -tnl来检测mysql服务是否开启,若开启则出现3306端口。 设置mys
阅读全文
摘要:编写map程序 编写reduce程序 编写main函数 把wordcount.txt放在hdfs的/dyh/data/input/目录下 执行:hadoop jar hdfs.jar com.cvicse.ump.hadoop.mapreduce.WordCount /dyh/data/input/
阅读全文
摘要:1、开发环境搭建 一、新建一个普通的java工程 二、引入hdfs相关的jar包 需要引入的jar包: common下的jar hdfs下的jar 2、编写HDFS相关的程序 导出jar包 上传jar到HADOOP运行环境,并执行 执行命令:hadoop jar jar包名字 main函数所在的类
阅读全文
摘要:关闭防火墙systemctl stop firewalld.service 关闭开机启动防火墙systemctl disable firewalld.service
阅读全文
摘要:原文地址:http://www.cnblogs.com/ivan0626/p/4144277.html 1) 用客户端工具(ssh client或者putty)连接到linux服务器。在root用户下输入命令 vi /etc/hosts,用vi编辑hosts文件,如下: 2) 输入命令:cd .ss
阅读全文