12 2017 档案

MongoDB分片集群原理、搭建及测试详解

摘要：随着技术的发展，目前数据库系统对于海量数据的存储和高效访问海量数据要求越来越高，MongoDB分片机制就是为了解决海量数据的存储和高效海量数据访问而生。 MongoDB分片集群由mongos路由进程（轻量级且非持久化进程）、复制集组成的片shards（分片一般基于复制集故障转移和冗余备份功能）、一组阅读全文

posted @ 2017-12-19 01:32 ChavinKing 阅读(7037) 评论(0) 推荐(1) 编辑

MongoDB复制集原理、环境配置及基本测试详解

摘要：一、MongoDB复制集概述 MongoDB复制集实现了冗余备份和故障转移两大功能，这样能保证数据库的高可用性。在生产环境，复制集至少包括三个节点，其中一个必须为主节点，一个从节点，一个仲裁节点。其中每一个节点都是mongod进程对应的实例，节点间通过心跳检查对方的状态。 primary节点：负责数阅读全文

posted @ 2017-12-17 23:21 ChavinKing 阅读(2790) 评论(0) 推荐(0) 编辑

elastricsearch学习笔记

摘要：一、基础概念 Elasticsearch有几个核心概念。从一开始理解这些概念会对整个学习过程有莫大的帮助。接近实时（NRT） Elasticsearch是一个接近实时的搜索平台。这意味着，从索引一个文档直到这个文档能够被搜索到有一个轻微的延迟（通常是1秒）。集群（cluster）一个集群就是由一个或多个节点组织在一起，它们共... 阅读全文

posted @ 2017-12-10 21:46 ChavinKing 阅读(485) 评论(0) 推荐(0) 编辑

hive on spark配置

摘要：1、安装java、maven、scala、hadoop、mysql、hive略2、编译spark./make-distribution.sh --name "hadoop2-without-hive" --tgz "-Pyarn,hadoop-2.6,parquet-provided"3、安装sparktar -zxvf spark-1.6.0-bin-hadoop2-without-hive.t... 阅读全文

posted @ 2017-12-03 19:03 ChavinKing 阅读(981) 评论(0) 推荐(0) 编辑