koushr - 博客园

分布式事务管理器dtm第一篇：介绍

摘要： https://dtm.pub/guide/start.html dtm全称是distributed transaction manager。dtm是cs架构。 dtm服务端部署： docker run --name dtm -p 36789:36789 -p 36790:36790 -e STOR 阅读全文

posted @ 2023-01-31 11:46 koushr 阅读(757) 评论(0) 推荐(0)

redis基础第三篇：script、function

摘要： redis执行lua脚本涉及到的命令： 1、eval 语法：eval "脚本" numkeys [key [key ...]] [arg [arg ...]] numkeys是key的个数，redis服务端通过这个参数知悉脚本后面哪些参数是key，哪些参数是arg。在脚本中，通过KEYS[1]、KE 阅读全文

posted @ 2022-09-08 20:05 koushr 阅读(284) 评论(0) 推荐(0)

go基础第六篇：常见开发错误

摘要： 1、入参数组修改不了一个无返回值的函数，入参是一个基本数据类型的数组，在函数中修改数组的值，是不会生效的。想要生效，需要把入参由数组改为数组指针或者slice。如果数组的元素不是基本数据类型，而是自定义的struct类型，那么除了把入参由数组改为数组指针或者slice外，把入参由普通数组改成指针阅读全文

posted @ 2021-07-06 10:21 koushr 阅读(75) 评论(0) 推荐(0)

时序数据库

摘要：时序数据库是专门用于存储和管理时间序列数据的数据库。时序数据库和传统关系库一样，是行式数据库，而不是列式数据库。时序数据库，开源代表是InfluxDB。 InfluxDB采用rust语言编写，占用内存较小。阅读全文

posted @ 2021-06-28 23:29 koushr 阅读(105) 评论(0) 推荐(0)

列数据库

摘要：行数据库用于OLTP，联机事务处理。而列数据库用于OLAP，联机分析处理。开源的列数据库有ClickHouse和Druid。 ClickHouse是俄罗斯一家公司开源的，c++语言开发，占用内存较小，docker部署方便。docker run --name clickhouse -e TZ=Asi 阅读全文

posted @ 2021-05-31 22:38 koushr 阅读(117) 评论(0) 推荐(0)

go基础第五篇：context

摘要： 1、带取消的context context.WithCancel(parent Context) (ctx Context, cancel CancelFunc) 传入一个父context，返回一个可以手动取消的子context及其取消函数。我们可以手动调用cancel()函数来取消子contex 阅读全文

posted @ 2021-03-11 11:01 koushr 阅读(121) 评论(0) 推荐(0)

IO多路复用

摘要： IO多路复用是一种同步IO模型，旨在实现一个线程可以监视多个文件句柄。一旦某个文件句柄就绪，就能够通知应用程序进行相应的读写操作。没有文件句柄就绪就会阻塞应用程序，交出CPU。多路是指网络连接，复用指的是同一个线程。多路复用有三种实现方式： 1、select实现 select仅仅知道有IO发生了，阅读全文

posted @ 2020-11-16 20:05 koushr 阅读(574) 评论(0) 推荐(0)

linux基础第五篇：curl、wget、grep使用

摘要： curl curl -v -X GET http://127.0.0.1:9000/helloWorld curl -v -H "Content-Type:application/json" -X POST --data '{"name":"zhangsan"}' http://127.0.0.1: 阅读全文

posted @ 2020-10-20 12:31 koushr 阅读(383) 评论(0) 推荐(0)

go基础第四篇：GMP

摘要：首先明确一点，goroutine不是线程，线程是操作系统管理的，而goroutine其实是Go runtime管理的用户态协程。一个go程序可以开几十万个goroutine，但操作系统只看到几个线程在跑。goroutine在用户态调度，线程在内核态调度，这就是goroutine为什么能这么轻量。阅读全文

posted @ 2020-09-29 20:09 koushr 阅读(617) 评论(0) 推荐(0)

redis基础第二篇：redis为什么那么快

摘要： 1、纯内存操作。 2、高效的数据结构。 3、使用I/O多路复用模型epoll。见https://www.cnblogs.com/koushr/p/13986873.html 阅读全文

posted @ 2020-09-07 00:44 koushr 阅读(107) 评论(0) 推荐(0)

websocket协议及应用

摘要： websocket协议是一个应用层协议，地位和http协议是一样的。 websocket最主要的作用是实现 <!DOCTYPE html> <html lang="en"> <script> // 向后端发送一个websocket连接请求 let ws = new WebSocket('ws://1 阅读全文

posted @ 2020-09-04 09:57 koushr 阅读(200) 评论(0) 推荐(0)

go基础第三篇：利用pprof定位cpu和内存问题

摘要：在项目的main.go文件中引入 _ "net/http/pprof" 在main函数中加入： go func() { _ = http.ListenAndServe(":6060", nil) }() 保证6060端口能访问到，如在容器中部署的话，别忘了添加端口映射。如果有防火墙的话，别忘了放开端阅读全文

posted @ 2020-07-29 14:45 koushr 阅读(753) 评论(0) 推荐(0)

go基础第二篇：并发之channel

摘要： go不推荐使用共享内存机制，而是推荐使用CSP并发模型机制。 CSP全称是Communicating Sequential Processes，可以翻译成通信顺序进程(Communicating翻译成通信的意思)。简单解释就是，CSP模型由并发执行的实体组成，实体之间通过发送消息进行通信，发送消息时阅读全文

posted @ 2020-07-27 19:05 koushr 阅读(247) 评论(0) 推荐(0)

go基础第一篇：常用语法

摘要：在用for...range遍历string时，第一个参数是字符索引，可能不是连续的，第二个参数是int32类型，即rune类型，rune是int32的别名，第二个参数的值是该字符在unicode字符集中对应的码点，如果字符是中文，那么第二个参数的值将大于255。rune其实就是字符。可以直接用str 阅读全文

posted @ 2020-05-22 18:16 koushr 阅读(435) 评论(0) 推荐(0)

kafka基本概念

摘要： 1、主题 Kafka将一组消息抽象归纳为一个主题（topic），也就是说，一个主题就是对消息的一个分类。生产者将消息发送到特定主题，消费者订阅主题或主题的某些分区进行消费。 2、消息消息是Kafka通信的基本单位，由一个固定长度的消息头和一个可变长度的消息体构成。每一条消息称为Record。 3、阅读全文

posted @ 2020-03-22 13:33 koushr 阅读(352) 评论(0) 推荐(0)

grpc第四篇：grpc-go、grpc-java桩代码生成及服务端、客户端开发

摘要：假设有一个proto文件，内容同https://github.com/grpc/grpc-go/blob/master/examples/helloworld/helloworld/helloworld.proto，如何生成golang或者java的桩代码？生成golang桩代码： 1、安装pro 阅读全文

posted @ 2019-11-26 20:55 koushr 阅读(360) 评论(0) 推荐(0)

kafka副本同步机制

摘要： kafka的复制机制，既不是单纯的同步复制，也不是单纯的异步复制。同步复制要求所有的follower都复制完，这条消息才会被commit，这种复制方式对吞吐率影响较大。异步复制，数据只要被leader写入log就认为已经commit，这种情况下，如果follower都还没有复制完，leader突然宕阅读全文

posted @ 2019-11-26 18:44 koushr 阅读(260) 评论(0) 推荐(0)

shell第五篇：

摘要： RT 阅读全文

posted @ 2019-08-29 11:50 koushr 阅读(365) 评论(0) 推荐(0)

grpc第一篇：What is gRPC

摘要：本文将介绍gRPC和protocol buffers。gRPC可以利用protocol buffers作为其接口定义语言(Interface Definition Language，IDL)和信息交换格式。预览在gRPC中，一个客户端应用可以直接调用不同机器上的服务端应用的方法，就好像调用本地方阅读全文

posted @ 2019-08-29 11:39 koushr 阅读(213) 评论(0) 推荐(0)

事务

摘要： ACID A是atomicity，原子性。 C是consistency，一致性。 I是isolation，隔离性。隔离级别很重要，脏读、不可重复读、幻读，都是隔离级别相关的问题。 D是durability，持久性。下面以mysql数据库详细讲解一下隔离级别。隔离级别有4种，由低到高，依次为Rea 阅读全文

posted @ 2019-07-03 19:45 koushr 阅读(707) 评论(0) 推荐(0)

EFK第一篇：

摘要： https://juejin.cn/post/7088314722432319524 阅读全文

posted @ 2019-06-19 11:53 koushr 阅读(326) 评论(0) 推荐(0)

分布式锁

摘要：分布式锁的使用场景是什么呢？之前红包需求的时候，有一个场景要用到分布式锁。同一个openid，最多只能抢到一个子红包。 1、先判断这个openid在不在该红包对应的已抢openid hash中 String hget(String key, String field); 2、如果在，就返回。如果不阅读全文

posted @ 2019-06-18 23:14 koushr 阅读(715) 评论(0) 推荐(0)

kafka服务端

摘要： kafka服务端的节点称为broker，一个kafka集群有多个broker。每个topic都可以有多个分区，每个分区都可以有多个副本。broker数、分区数、副本数随时可以扩容，这是典型的分布式多副本冗余机制。通过zookeeper从各broker中选出一个作为controller，contro 阅读全文

posted @ 2019-06-02 18:51 koushr 阅读(4514) 评论(0) 推荐(0)

linux基础第二篇：TCP SOCKET的状态

摘要：建立TCP连接的三次握手： 1、client向处于LISTEN状态的server发送SYN后，变为SYN_SENT状态。 2、server收到SYN后，变为SYN_RECV状态，并向client返回SYN_ACK。 3、client收到SYN_ACK后，变为ESTABLISHED状态，并向serve 阅读全文

posted @ 2018-08-15 20:31 koushr 阅读(4892) 评论(0) 推荐(0)

linux基础第一篇：ss、lsof、watch命令使用

摘要： ss ss命令和netstat命令的作用一样，参数也差不多，比netstat快。 ss是Socket Statistics的缩写，意思是套接字统计。 lsof lsof -i:8080 watch watch -n 1 'free -h' 每隔1s执行一次命令阅读全文

posted @ 2018-07-19 09:13 koushr 阅读(569) 评论(0) 推荐(0)

lua基础第一篇：and、or运算

摘要： lua中的and和or，虽说是逻辑运算符，但他们返回的不是布尔值，而是操作数本身： a and b：如果a为false或nil，会返回a，否则返回b。 a or b：如果a为非nil且非false，会返回a，否则返回b。阅读全文

posted @ 2018-06-15 18:44 koushr 阅读(199) 评论(0) 推荐(0)

case when使用

摘要： case when可以用在select后面，也可以用在order后面，也可以用在update后面。 case when语法： case when condition1 then result1 when condition2 then result2 when conditionn then res 阅读全文

posted @ 2018-06-07 21:03 koushr 阅读(639) 评论(0) 推荐(0)

sql笔试题

摘要：题目一、表t_score，数据如下 name subject score 张三语文 81 张三数学 75 李四语文 76 李四数学 90 王五语文 81 王五数学 100 王五英语 90 对应ddl及dml语句如下： CREATE TABLE `t_score` ( `id` int 阅读全文

posted @ 2018-06-07 16:54 koushr 阅读(194) 评论(0) 推荐(0)

case when语法以及与group by的配合使用

摘要：一：case when语法： case when有两种语法：语法1： case 某字段 when 值1 then 伪值1 when 值2 then 伪值2 ...... else 伪值n end 注意，when之间没有任何标点符号，且最后要以end结尾，否则会报语法错误。如有一种常见情况是，数据阅读全文

posted @ 2017-12-17 17:58 koushr 阅读(6979) 评论(0) 推荐(0)

kafka消费者组、消费者

摘要：一个消费者组可能有一个或者多个消费者。同一个消费者组可以订阅一个或者多个主题。主题的某一个分区只能被消费者组的某一个消费者消费，不能被同一个消费者组的多个消费者消费。一个消费者组的一个消费者可以消费一个主题的多个分区。那么分区和消费者之间是如何对应的呢？假设消费者组cg1(group.id=c 阅读全文

posted @ 2017-10-28 18:40 koushr 阅读(1142) 评论(0) 推荐(0)

单链表和双链表

摘要：单链表英文是singly-linked list，双链表英文是doubly-linked list。单链表的头结点、尾节点有数据吗？双链表的头节点、尾节点有数据吗？其实自己搞混了一个概念，头结点和头指针的概念。阅读全文

posted @ 2017-10-28 18:30 koushr 阅读(282) 评论(0) 推荐(0)

随机id算法

摘要：雪花算法 https://github.com/bwmarrin/snowflake 返回一个64位整数。阅读全文

posted @ 2017-09-07 01:29 koushr 阅读(1653) 评论(0) 推荐(0)

sql语句中开窗函数的使用

摘要： postgresql和8.0版本之后的mysql，均支持开窗函数。开窗函数主要分为两类：一、排序函数： row_number() over(partition by xxx order by yyy) partition by xxx 表示按照xxx字段分区(分区就是分组的意思)，如果没有par 阅读全文

posted @ 2017-09-04 00:11 koushr 阅读(3309) 评论(0) 推荐(1)

mysql一些概念

摘要： buffer pool，缓存池，Innodb引擎缓存数据和索引的内存区域，默认128M。可在mysql命令行客户端执行show variables like 'innodb_buffer_pool_size' 查看。如果可用内存很大，如GB级，那么可以创建多个buffer pool(设置innodb 阅读全文

posted @ 2017-08-06 18:35 koushr 阅读(221) 评论(0) 推荐(0)

redis基础第一篇：一些遗漏命令

摘要： pipeline 如果想连续执行多个redis命令，且后面的命令不依赖于前面命令的结果，则可以把这些命令用pipeline包起来，从而只向redis服务器发起一次情求，在响应中获取所有命令的执行结果，这样可以节省请求响应的往返时间RTT，在应用服务器和redis服务器非局域网时效果尤其显著。 pip 阅读全文

posted @ 2017-07-23 02:11 koushr 阅读(1155) 评论(0) 推荐(0)

rpc核心

摘要：被面试官问过这样一个问题：“假如要你实现一个rpc框架，客户端和服务端你要考虑哪些东西？” rpc框架负责屏蔽底层的传输方式(tcp或者udp)、序列化方式(xml/json/二进制)和通信细节，服务调用者可以像调用本地接口一样调用远程服务，而不需要关心底层通信细节和调用过程。 rpc的组件一般有服阅读全文

posted @ 2017-06-11 16:16 koushr 阅读(245) 评论(0) 推荐(0)

RPC简介

摘要： RPC(Remote Process Call Protocol)，远程过程调用协议，是一种通过网络从远程计算机程序上请求服务，而不需要了解底层网络技术的协议。RPC协议假定某些传输协议的存在，如TCP或UDP，为通信程序之间携带信息数据。 RPC采用客户机/服务器模式，请求程序就是一个客户机，而服阅读全文

posted @ 2017-05-24 14:26 koushr 阅读(551) 评论(0) 推荐(0)

分布式一些概念

摘要：分布式系统定义：分布式系统是一个硬件或软件组件分布在不同的网络计算机上，彼此之间仅仅通过消息传递进行通信和协调的系统。分布式系统一些典型的问题：通信异常：分布式系统需要在各个节点之间进行网络通信，因此每次网络通信都会伴随着网络不可用的风险，比如说光纤被挖断了。另外，即使分布式系统各节点之间的阅读全文

posted @ 2017-05-14 00:50 koushr 阅读(383) 评论(0) 推荐(0)

树、二叉树、二叉搜索树、平衡二叉树、B树、B+树、红黑树

摘要：一、树 Tree 树是n个结点的有限集。n=0时称为空树。在任意一棵非空树中：①有且仅有一个根结点；②当n>1时，其余结点可分为m个互不相交的有限集，其中每一个集合本身又是一棵树，称为根的子树。结点的分类结点拥有的子结点的个数称为结点的度。度为0的结点称为叶结点。度不为0的结点称为分支结点。树的阅读全文

posted @ 2017-04-28 11:12 koushr 阅读(697) 评论(0) 推荐(0)

mysql：各种log

摘要： mysql服务层log主要有慢查询日志和binlog，存储引擎层日志(InnoDB引擎)主要有undo log和redo log。服务层日志慢查询日志记录的是执行时间超过阈值的sql，用于定位问题。 binlog主要作用是数据复制，如主从同步。 InnoDB存储引擎层日志 undo log记录的阅读全文

posted @ 2017-04-17 23:38 koushr 阅读(579) 评论(0) 推荐(0)

导航

公告