摘要:
LSM树(Log-Structured Merge Tree)存储引擎 代表数据库:nessDB、leveldb、hbase等 核心思想的核心就是放弃部分读能力,换取写入的最大化能力。LSM Tree ,这个概念就是结构化合并树的意思,它的核心思路其实非常简单,就是假定内存足够大,因此不需要每次有数 阅读全文
摘要:
一、数据中台定义 数据中台是一套可持续“让企业的数据用起来”的机制,一种战略选择和组织形式,是依据企业特有的业务模式和组织架构,通过有形的产品和实施方法论支撑,构建一套持续不断把数据变成资产并服务于业务的机制。 二、数据中台必须具备4个核心能力 数据中台需要具备数据汇聚整合、数据提纯加工、数据服务可 阅读全文
摘要:
We can use Load Balance strategy to increase the system volume . Part 1: LB hardware/software horizontal comparison the following is the cost and capa 阅读全文
摘要:
MQTT(Message Queue Telemetry Transport),遥测传输协议,提供订阅/发布模式,更为简约、轻量,易于使用,针对受限环境(带宽低、网络延迟高、网络通信不稳定),可以简单概括为物联网打造,官方总结特点如下: 1.使用发布/订阅消息模式,提供一对多的消息发布,解除应用程序 阅读全文
摘要:
Dubbo :是一个RPC框架,SOA框架: Dubbo缺省协议采用单一长连接和NIO异步通讯,适合于小数据量大并发的服务调用,以及服务消费者机器数远大于服务提供者机器数的情况。 长链接,NIO 作为RPC:支持各种传输协议,如dubbo,hession,json,fastjson,底层采用mina 阅读全文
摘要:
rule.xml中定义了对表进行拆分所涉及到的规则。我们可以对表使用不同的分片算法,或对表使用相同的算法但不同的参数。该文件中主要有tableRule和function 两个标签。 1. tableRule标签 该标签定义表规则。在rule.xml中定义表规则,例如: <tableRule name 阅读全文
摘要:
在实现分库分表的情况下,数据库自增主键已经无法保证在集群中是全局唯一的主键了,因此mycat提供了全局的sequence,并且提供了本地配置、数据库配置等多种实现方式。 1. 本地文件方式 采用该方式,mycat将sequence配置到classpath目录的sequence_conf.proper 阅读全文
摘要:
schema.xml 涵盖了MyCat的逻辑库、表、分片规则、分片节点及数据源。 <?xml version="1.0"?> <!DOCTYPE mycat:schema SYSTEM "schema.dtd"> <mycat:schema xmlns:mycat="http://io.mycat/ 阅读全文
摘要:
<?xml version="1.0" encoding="UTF-8"?> <!-- - - Licensed under the Apache License, Version 2.0 (the "License"); - you may not use this file except in 阅读全文
摘要:
Sharding 模式追求的是高性能,而且是三种集群中最复杂的。在实际生产环境中,通常将 Replica Set 和 Sharding 两种技术结合使用。 主从复制 虽然 MongoDB 官方建议用副本集替代主从复制,但是本节还是从主从复制入手,让大家了解 MongoDB 的复制机制。主从复制是 M 阅读全文