12 2023 档案
摘要:今天在使用docker run命令启动容器覆盖dockerfile原有启动命令的时候发生了如下错误 docker run -it --name translate-algorithm --entrypoint "tail -F /dev/null" nginx:v1 docker: Error re
阅读全文
摘要:一、b+树 每次查找数据时把磁盘IO次数控制在一个很小的数量级,最好是常数数量级。那么我们就想到如果一个高度可控的多路搜索树是否能满足需求呢?就这样,b+树应运而生(B+树是通过二叉查找树,再由平衡二叉树,B树演化而来)。 1.索引字段要尽量的小:通过上面的分析,我们知道IO次数取决于b+数的高度h
阅读全文
摘要:一、优化工具: 1.1 、系统优化工具 1 top 实时监控当前操作系统的负载情况的,每秒刷新一次状态,通常会关注三大指标(CPU、MEM、IO) 1.1 结果分析 1、整体负载情况 load average: 0.00, 0.00, 0.00 整体的负载情况,判断标准,如果值非常高,只能告诉我们操
阅读全文
摘要:一、企业读写分离及分库分表方案介绍 Mysql-proxy(oracle) Mysql-router(oracle) Atlas (Qihoo 360) Atlas-sharding (Qihoo 360) Cobar(是阿里巴巴(B2B)部门开发) Mycat(基于阿里开源的Cobar产品而研发)
阅读全文
摘要:1、普通主从复制架构存在的不足 高可用? 业务不间断的工作。 用户的体验不出来业务断点。 普通主从环境,存在的问题: 1、监控的问题:APP应用程序,并不具备监控数据库的功能,没有责任监控数据库是否能连接。 2、选主的问题: 3、failover:VIP漂移,对于应用透明 4、数据补偿 2、企业高可
阅读全文
摘要:一、mysql复制原理 1.1 主从复制原理过程 从库的I/O thread 线程会读取master info 文件 获取主库的 user,password port信息然后还会获取上次获取主库二进制日志的位置 如3640 就是00003这个文件640这个位置,主库收到从库的请求后,会验证用户名密码
阅读全文
摘要:一、备份的类型 冷备份:关闭数据、停止业务 温备份:加锁备份 热备份:在先备份,不会影响到也正常运行 二、备份方式 2.1 逻辑备份:基于SQL语句的备份 mysqldump建库、建表、数据插入 基于二进制日志:数据库的所有变化类的操作 基于复制的备份:将二进制日志实时传送到另一台机器并且恢复 2.
阅读全文
摘要:一、mysql常见日志 二、错误日志 配置方法: [mysqld] log-error=/data/mysql/mysql.log 查看配置方式: mysql> show variables like '%log%error%'; 作用: 记录mysql数据库的一般状态信息及报错信息,是我们对于数据
阅读全文
摘要:MySQL 存储引擎 可以理解为,MySQL的“文件系统”,(插件形式存在)只不过功能更加强大。mysql提供的存储引擎有InnoDB、MyISAM等 TokuDB 是第三方的存储引擎moardb,数据压缩比打,写入数据快,如果你的应用是读多写少的情况强烈建议使用此存储引擎 innodb存储引擎的功
阅读全文
摘要:explain(执行计划),使用explain关键字可以模拟优化器执行sql查询语句,从而知道MySQL是如何处理sql语句。explain主要用于分析查询语句或表结构的性能瓶颈 mysql> explain select name,gender,age from test where gender
阅读全文
摘要:一、mysql索引类型 BTREE:B+树索引 (常用) HASH:HASH索引 FULLTEXT:全文索引 RTREE:R树索引 二、索引分类 主键索引 普通索引*** ** 唯一索引 三、索引基本管理 创建和删除: alter table stu add index idx_name(stu_n
阅读全文
摘要:数据库的元数据即数据库对象的数据,如表,库,的属性数据等,存放在informatica——schema数据库中,已虚拟表的形式存在,只能读不能写 一、 获取元数据的方法 查询INFORMATION_SCHEMA 数据库表。 其中包含MySQL数据库服务器所管理的所有对象的相关数据 使用SHOW 语句
阅读全文
摘要:四种主要类别: – 数值类型 – 字符类型 – 时间类型 – 二进制类型 数据类型的ABC 要素: – Appropriate(适当) – Brief(简洁) – Complete(完整) 一、 数值数据类型 使用数值数据类型时的注意事项: 数据类型所表示的值的范围 – 列值所需的空间量 – 列精度
阅读全文
摘要:SQL定义:结构化的查询语言,mysql接口程序只负责接收SQL,传送给SQL层 SQL种类 DDL:数据库(对象)定义语言 DCL:数据库控制语言(grant revoke) DML:数据(行)操作语言(update delete insert) DQL: 数据查询语言(show、select)
阅读全文
摘要:一、MySQL用户管理 用户定义: user 主机范围 使用某个用户 从哪个(些)地址访问我的数据库 用户的功能: 1、用来登录mysql数据库 2、用来管理数据库对象(库、表) 权限 功能:针对不同用户设置对不同对象管理能力 select update delete insert create d
阅读全文
摘要:多实例就是多套线程和多各进程和多个预分配的内存结构 配置思路 启动多个mysqld进程 规划多套数据 规划多个端口 规划多套日志路径 配置例子 1、创建多套目录 mkdir -p /data/330{7,8,9} 2、准备多套配置文件 vi /data/3307/my.cnf [mysqld] ba
阅读全文
摘要:一、数据库连接管理 mysql -uroot -poldboy123 # 隐藏条件-S 默认socket方式 mysql -uroot -poldboy123 -h 10.0.0.52 -P 3308 #tcp/ip的方式 mysql -uroot -poldboy123 -S /applicati
阅读全文
摘要:一、 MySQL服务器连接模型 2、应用程序如何连接到mysql 2.1 tcp/ip的方式 mysql -uroot -poldboy123 -h 10.0.0.200 2.2 套接字的方式 mysql -uroot -poldboy123 -S /tmp/mysql.sock 二、MySQL服务
阅读全文
摘要:关系型数据库的特点 二维表 典型产品Oracle传统企业,MySQL是互联网企业 数据存取是通过SQL 最大特点,数据安全性方面强(ACID) • NoSQL:非关系型数据库(Not only SQL) 不是否定关系型数据库,做关系型数据库的的补充 想做老大,先学会做老二 • NoSQL特性总览 –
阅读全文
摘要:Redis提供了各类开发语言的API,方便开发语言连接使用Redis。 https://redis.io/clients 官方网站提供了不同开发语言的API程序。 网中,给我们提供了很多种Python连接redis的API,我们通常选择有“笑脸”并且带有“星号”的使用 这里我们推荐使用redis-p
阅读全文
摘要:一、介绍 Redis 集群是一个可以在多个 Redis 节点之间进行数据共享的设施(installation)。 Redis 集群不支持那些需要同时处理多个键的 Redis 命令, 因为执行这些命令需要在多个 Redis 节点之间移动数据, 并且在高负载的情况下, 这些命令将降低 Redis 集群的
阅读全文
摘要:一、redis-sentinel介绍 Redis-Sentinel是Redis官方推荐的高可用性(HA)解决方案,当用Redis做Master-slave的高可用方案时,假如master宕机了,Redis本身(包括它的很多客户端)都没有实现自动进行主备切换,而Redis-sentinel本身也是一个
阅读全文
摘要:一、主从复制特性 使用异步复制。 一个主服务器可以有多个从服务器。 从服务器也可以有自己的从服务器。 复制功能不会阻塞主服务器。 可以通过复制功能来让主服务器免于执行持久化操作,由从服务器去执行持久化操作即可 当配置Redis复制功能时,强烈建议打开主服务器的持久化功能。 否则的话,由于延迟等问题,
阅读全文
摘要:一、redis中的事务 redis中的事务跟关系型数据库中的事务是一个相似的概念,但是有不同之处。关系型数据库事务执行失败后面的sql语句不在执行,而redis中的一条命令执行失败,其余的命令照常执行。 redis中开启一个事务是使用multi,相当于begin\start transaction,
阅读全文
摘要:一、redis持久化 1.1 持久化类型 |持久化类型 | 介绍|优点|缺点 | | | | |-- |RDB持久化 | 可以在指定的时间间隔内生成数据集的时间点快照(point-in-time snapshot)。|速度快,适合于用做备份,主从复制也是基于RDB持久化功能实现的。|会有丢失部分数据
阅读全文
摘要:一、redis简介 1、Redis是一款开源的,ANSI C语言编写的,高级键值(key-value)缓存和支持永久存储NoSQL数据库产品。 2、 Redis采用内存(In-Memory)数据集(DataSet) 。 3、支持多种数据类型。 4、运行于大多数POSIX系统,如Linux、*BSD、
阅读全文
摘要:#!/bin/bash ############################################################## # File Name: install_redis.sh # Version: V1.0 # Author: junwang # Organizat
阅读全文
摘要:#!/bin/bash ############################################################## # File Name: install_rabbit.sh # Version: V1.0 # Author: junwang # Organiza
阅读全文
摘要:#!/bin/bash ############################################################## # File Name: install_nginx.sh # Version: V1.0 # Author: junwang # Organizat
阅读全文
摘要:#!/bin/bash ############################################################## # File Name: install_nacos.sh # Version: V1.0 # Author: junwang # Organizat
阅读全文
摘要:#!/bin/bash ############################################################## # File Name: install_redis.sh # Version: V1.0 # Author: junwang # Organizat
阅读全文
摘要:#!/bin/bash ############################################################## # File Name: install_redis.sh # Version: V1.0 # Author: junwang # Organizat
阅读全文
摘要:#!/bin/bash ############################################################## # File Name: install_minio.sh # Version: V1.0 # Author: junwang # Organizat
阅读全文
摘要:单节点kafka安装 #!/bin/bash ############################################################## # File Name: install_kafka.sh # Version: V1.0 # Author: junwang
阅读全文
摘要:#!/bin/bash ############################################################## # File Name: install_redis.sh # Version: V1.0 # Author: junwang # Organizat
阅读全文
摘要:#!/bin/bash ############################################################## # File Name: install_emqx.sh # Version: V1.0 # Author: junwang # Organizati
阅读全文
摘要:#!/bin/bash ############################################################## # File Name: install_redis.sh # Version: V1.0 # Author: junwang # Organizat
阅读全文
摘要:#!/bin/bash ############################################################## # File Name: install_cockroach.sh # Version: V1.0 # Author: junwang # Organ
阅读全文