随笔分类 - 数据库
数据库相关
摘要：一、基础篇 查询数据 本节将学习如何从Oracle数据库中查询数据。 ● Select语句 - 演示如何查询单个表中的数据。 排序数据 ● ORDER BY语句 - 按升序或降序对查询的结果集进行排序。 过滤数据 ● DISTINCT - 介绍如何消除查询输出中的重复行。 ● WHERE - 演示如
阅读全文
摘要：https://www.runoob.com/postgresql/postgresql-tutorial.html
阅读全文
摘要：https://blog.csdn.net/bochuangli/article/details/123029392 https://blog.csdn.net/bochuangli/article/details/123014331 文章目录1 概述1.1分库分表是什么1.2 分库分表的方式1.2
阅读全文
摘要：一、Sharding-JDBC 简介 最早是当当网内部使用的一款分库分表框架，到2017年的时候才开始对外开源，这几年在大量社区贡献者的不断迭代下，功能也逐渐完善，现已更名为 ShardingSphere，2020年416正式成为 Apache 软件基会的顶级项。 随着版本的不断更迭 的核心功能也变
阅读全文
摘要：一、什么是数据的优化 数据库的优化是一个综合型的技术，并不是通过某一种方式让数据库效率提高很多， 而使通过多方便的提高，从而使数据提高很多 主要包括 1. 表的设计合理化 2. SQL语句的优化 3. 给表要添加合适的索引 普通索引、主键所以，唯一索引 unique、全文索引 4. 分表技术（水平分
阅读全文
摘要：分库分表 理论 当一张表的数据达到几千万时，查询一次所花的时间会变长。业界公认MySQL单表容量在 1千万 以下是最佳状态，因为这时它的BTREE索引树高在3~5之间。 数据切分可以分为：垂直切分和水平切分。 一、垂直切分 垂直切分又可以分为: 垂直分库和垂直分表。 1、垂直分库 概念 就是根据业务
阅读全文
摘要：背景 这两年互联网行业掀着一股新风，总是听着各种高大上的新名词。大数据、人工智能、物联网、机器学习、商业智能、智能预警啊等等。 以前的系统，做数据可视化，信息管理，流程控制。现在业务已经不仅仅满足于这种简单的管理和控制了。数据可视化分析，大数据信息挖掘，统计预测，建模仿真，智能控制成了各种业务的追求
阅读全文
摘要：1、Maxwell 简介 Maxwell 是一个能实时读取 MySQL 二进制日志文件binlog，并生成 Json格式的消息，作为生产者发送给 Kafka，Kinesis、RabbitMQ、Redis、Google Cloud Pub/Sub、文件或其它平台的应用程序。它的常见应用场景有ETL、维
阅读全文
摘要：1 Sqoop概述 2 版本说明 3 驱动安装 3.1 MySQL 4 基本用法 4.1 导入 4.1.1 保护密码 4.1.2 使用其他文件格式 4.1.3 压缩导入的数据 4.1.4 提高传输速度 4.1.5 自定义类型映射 4.1.6 并行控制 4.1.7 对NULL值进行编码 4.1.8 导
阅读全文
摘要：ShardingSphere实现分库分表 有关分库分表前面写了四篇博客: 1、分库分表(1) 理论 2、分库分表(2) ShardingSphere(理论) 3、分库分表(3) SpringBoot + ShardingSphere实现读写分离 4、分库分表(4) SpringBoot + Shar
阅读全文
摘要：ShardingSphere 理论 ShardingSphere在中小企业需要分库分表的时候用的会比较多，因为它维护成本低，不需要额外增派人手;而且目前社区也还一直在开发和维护，还算是比较活跃。 但是中大型公司一般会选择选用 Mycat 这类 proxy 层方案，因为可能大公司系统和项目非常多，团队
阅读全文
摘要：前言在进行冷热分离的时候，需要将数据实时的复制在历史数据库中，我们使用的是binlog+canal的思想,将每次数据库数据的变更转换成消息发出来,然后再操作这些消息达到数据复制的在京东,实现同样功能的组件，叫binlake接下来详细说下: 1.Binlogmysql有多种日志，常见的有: 错误日志（
阅读全文
摘要：1、 PL/SQL语句块PL/SQL语句块只适用于Oracle数据库，使用时临时保存在客户端，而不是保存在数据库。基本语法: Sql代码 declare 变量声明、初始化 begin 业务处理、逻辑代码 exception 异常捕获 end; 变量声明：<变量名> <类型及长度> [:=<初始值>]
阅读全文
摘要：互联网当下,数据库的拆分过程基本遵循的顺序是：垂直拆分、读写分离、水平拆分(也称之为分库分表)。 一、垂直拆分 1、什么是垂直拆分？ 指的是将一个包含了很多表的数据库,根据表的功能的不同,拆分为多个小的数据库,每个库中包含部分表。 比如：电商系统采用的库为db_eshop,根据用户功能和产品功能,可
阅读全文
摘要：什么是NoSQL NoSQL，指的是非关系型的数据库。NoSQL有时也称作Not Only SQL的缩写，是对不同于传统的关系型数据库的数据库管理系统的统称,它具有非关系型、分布式、不提供ACID的数据库设计模式等特征。 NoSQL用于超大规模数据的存储。（例如谷歌或Facebook每天为他们的用户
阅读全文
摘要：在介绍MVCC概念之前，我们先来想一下数据库系统里的一个问题：假设有多个用户同时读写数据库里的一行记录，那么怎么保证数据的一致性呢？一个基本的解决方法是对这一行记录加上一把锁，将不同用户对同一行记录的读写操作完全串行化执行，由于同一时刻只有一个用户在操作，因此一致性不存在问题。但是，它存在明显的性能
阅读全文
摘要：ClustrixDB是一种集群式RDBMS，可确保事务处理符合ACID特性，同时可轻松的提供可扩展性和容错能力。 ClustrixDB集群由三个或更多节点（联网的同构服务器）组成。ClustrixDB使用无共享架构。集群中的每个节点可以执行任何读取或写入操作。如果要扩充数据库容量，只需添加更多节点即
阅读全文
摘要：随着企业中日益复杂与多变的需求，以及迅速扩展带来的海量数据的业务，IT部门需要将越来越多的信息提供给用户，同时在现今的全球经济背景环境下，IT部 门还需要在提供高效服务的同时，降低其设备与程序维护成本。SequoiaDB作为全球第一家企业级文档式非关系型数据库，则提供了诸如此类（高可扩展 性、高可用
阅读全文
摘要：起因 一直在思索MySQL成功的原因，所以向一些业界的朋友请教探讨，得出一点极为简单的东西如下： 总结: MySQL的成功是随同互联网成长、LAMP成长、MySQL的DBA成长而成长的(功能逐步完善)，它突出的特点是:因简单而易用/免费/开源/因插件框架而易扩展/复制功能领先/性能好。 1 因简单而
阅读全文