2017年8月1日
简单mongo的副本集搭建
摘要： wget http://fastdl.mongodb.org/linux/mongodb-linux-x86_64-2.2.3.tgztar vxzf mongodb-linux-x86_64-2.2.3.tgzcd mongodb-linux-x86_64-2.2.3三台机器：一台主节点，两台副节 阅读全文
posted @ 2017-08-01 11:58 青狼_兴 阅读(159) 评论(0) 推荐(0) 编辑
mongo与elasticsearch数据同步插件
摘要： 前提条件： mongo集群必须是副本集，因为同步插件读取的是日志文件 1.需要安装pip插件（如果已经安装不需再安装） yum install python-setuptools && easy_install pip 2.在mongo端 安装 mongo-connector。pip install 阅读全文
posted @ 2017-08-01 11:52 青狼_兴 阅读(836) 评论(0) 推荐(0) 编辑
redis集群的安装部署
摘要： 安装过程 1. 下载并解压 wget http://download.redis.io/releases/redis-3.2.4.tar.gz tar -zxvf redis-3.2.4.tar.gz 2. 编译安装 3. 将 redis-trib.rb 复制到 /usr/local/bin 目录下 阅读全文
posted @ 2017-08-01 11:01 青狼_兴 阅读(148) 评论(0) 推荐(0) 编辑
2017年7月26日
nginx安装和反向代理配置
摘要： 准备工作： 安装部署 先下载好Nginx（http://nginx.org/）和pcre(http://pcre.org/) 一、安装前需要安装gcc、openssl-devel、pcre-devel、zlib-devel 命令：yum -y install gcc openssl-devel pc 阅读全文
posted @ 2017-07-26 17:03 青狼_兴 阅读(159) 评论(0) 推荐(0) 编辑
2017年7月21日
spark集群安装部署
摘要： 安装部署环境： 首先免密钥配置 ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys 将本机的id_dsa.pub内容追加到其他机器的authorized_keys中 一、安装 阅读全文
posted @ 2017-07-21 14:01 青狼_兴 阅读(138) 评论(0) 推荐(0) 编辑
zookeeper安装配置
摘要： zookeeper安装配置 第一步：配置机器名称和IP映射 3.192.168.0.177 slave-03 第二步：修改ZooKeeper配置文件 在其中一台机器（slave-01）上，解压缩zookeeper-3.3.4.tar.gz，修改配置文件conf/zoo.cfg，内容如下所示： 第三步 阅读全文
posted @ 2017-07-21 12:55 青狼_兴 阅读(121) 评论(0) 推荐(0) 编辑
hbase伪分布式搭建和完全分布式搭建
摘要： hbase配置 （前提是zookeeper能正常使用） HBase是主从式结构，HMaster、HRegionServer HBase的伪分布 1.配置环境变量HBASE_HOME 2. 修改文件$HBASE_HOME/conf/hbase-env.sh，修改内容如下 export JAVA_HOM 阅读全文
posted @ 2017-07-21 12:21 青狼_兴 阅读(549) 评论(0) 推荐(0) 编辑
2017年6月16日
spark项目启动报内存溢出不能创建线程错误
摘要： 1.错误信息如下： java.lang.OutOfMemoryError: unable to create new native thread at java.lang.Thread.start0(Native Method) at java.lang.Thread.start(Thread.ja 阅读全文
posted @ 2017-06-16 12:01 青狼_兴 阅读(666) 评论(0) 推荐(0) 编辑
idea中spark项目Scala语言读取properties文件
摘要： 1.将文件放入resources目录下面，将文件设置成resources file->Project Structure->Modules 选择文件，然后点击resources 2.在类中加入代码 val properties = new Properties()val in = this.getC 阅读全文
posted @ 2017-06-16 11:50 青狼_兴 阅读(3028) 评论(0) 推荐(0) 编辑
idea搭建简单spring-boot项目
摘要： 1.创建空项目 file->new->project->maven->next 自定义名字，下一步 自定义名字，然后next，创建好项目 2.在pom.xml中加入依赖 阅读全文
posted @ 2017-06-16 11:16 青狼_兴 阅读(1132) 评论(0) 推荐(0) 编辑