09 2023 档案
发表于 2023-09-25 21:41阅读：39评论：0推荐：0
摘要：【一】主题 Topic 主题是 Apache RocketMQ 中消息传输和存储的顶层容器，用于标识同一类业务逻辑的消息。 主题的作用主要如下： 定义数据的分类隔离： 在 Apache RocketMQ 的方案设计中，建议将不同业务类型的数据拆分到不同的主题中管理，通过主题实现存储的隔离性和订阅隔离
阅读全文 »
发表于 2023-09-25 21:41阅读：16评论：0推荐：0
摘要：【一】什么是RocketMQ RocketMQ 是一款功能强大的分布式消息系统，广泛应用于多个领域，包括异步通信解耦、企业解决方案、金融支付、电信、电子商务、快递物流、广告营销、社交、即时通信、移动应用、手游、视频、物联网、车联网等。 RocketMQ 源码地址：https://github.com
阅读全文 »
发表于 2023-09-24 16:55阅读：89评论：0推荐：0
摘要：基础的 Pandas 学习笔记
阅读全文 »
发表于 2023-09-24 16:44阅读：134评论：0推荐：0
摘要：【一】引入 我们知道 Pandas 是在 NumPy 的基础构建而来 因此，熟悉 NumPy 可以更加有效的帮助我们使用 Pandas。 NumPy 主要用 C语言编写 因此，在计算还和处理一维或多维数组方面，它要比 Python 数组快得多。 关于 NumPy 的学习，可以参考《Python Nu
阅读全文 »
发表于 2023-09-24 16:44阅读：278评论：0推荐：0
摘要：【一】Python Pandas读取文件 当使用 Pandas 做数据分析的时，需要读取事先准备好的数据集，这是做数据分析的第一步。 Panda 提供了多种读取数据的方法： read_csv() 用于读取文本文件 read_json() 用于读取 json 文件 read_sql_query() 读
阅读全文 »
发表于 2023-09-24 16:44阅读：88评论：0推荐：0
摘要：【一】Pandas绘图 Pandas 在数据分析、数据可视化方面有着较为广泛的应用，Pandas 对 Matplotlib 绘图软件包的基础上单独封装了一个plot()接口，通过调用该接口可以实现常用的绘图操作。 本节我们深入讲解一下 Pandas 的绘图操作。 Pandas 之所以能够实现了数据可
阅读全文 »
发表于 2023-09-24 16:43阅读：54评论：0推荐：0
摘要：【一】Python Pandas描述性统计 描述统计学（descriptive statistics）是一门统计学领域的学科，主要研究如何取得反映客观现象的数据，并以图表形式对所搜集的数据进行处理和显示，最终对数据的规律、特征做出综合性的描述分析。 Pandas 库正是对描述统计学知识完美应用的体现
阅读全文 »
发表于 2023-09-24 16:43阅读：120评论：0推荐：0
摘要：【一】三维数据结构 Panel 结构也称“面板结构”，它源自于 Panel Data 一词，翻译为“面板数据”。 如果您使用的是 Pandas 0.25 以前的版本，那么您需要掌握本节内容，否则，作为了解内容即可。 自 Pandas 0.25 版本后， Panel 结构已经被废弃。 Panel 是一
阅读全文 »
发表于 2023-09-24 16:43阅读：81评论：0推荐：0
摘要：【一】引入 DataFrame 是 Pandas 的重要数据结构之一，也是在使用 Pandas 进行数据分析过程中最常用的结构之一，可以这么说，掌握了 DataFrame 的用法，你就拥有了学习数据分析的基本能力。 【二】认识DataFrame结构 DataFrame 一个表格型的数据结构，既有行标
阅读全文 »
发表于 2023-09-24 16:43阅读：61评论：0推荐：0
摘要：【一】Pandas Series Series 结构，也称 Series 序列，是 Pandas 常用的数据结构之一，它是一种类似于一维数组的结构，由一组数据值（value）和一组标签组成，其中标签与数据值之间是一一对应的关系。 Series 可以保存任何数据类型，比如整数、字符串、浮点数、Pyth
阅读全文 »
发表于 2023-09-24 16:42阅读：85评论：0推荐：0
摘要：【一】Pandas是什么 Pandas 是一个开源的第三方 Python 库，从 Numpy 和 Matplotlib 的基础上构建而来，享有数据分析“三剑客之一”的盛名（NumPy、Matplotlib、Pandas）。 Pandas 已经成为 Python 数据分析的必备高级工具，它的目标是成为
阅读全文 »
发表于 2023-09-21 18:37阅读：69评论：0推荐：0
摘要：- 在责任链模式中，多个处理器依次处理同一个请求。
- 一个请求先经过 A 处理器处理，然后再把请求传递给 B 处理器，B 处理器处理完后再传递给 C 处理器，以此类推，形成一个链条
- 链条上的每个处理器各自承担各自的处理职责。
阅读全文 »
发表于 2023-09-19 16:58阅读：126评论：0推荐：0
摘要：Django框架高级之DRF部分源码分析
阅读全文 »
发表于 2023-09-19 16:56阅读：165评论：0推荐：0
摘要：DRF之JWT签发Token源码分析
阅读全文 »
发表于 2023-09-19 16:56阅读：71评论：0推荐：0
摘要：DRF之异常捕获源码分析
阅读全文 »
发表于 2023-09-19 16:56阅读：49评论：0推荐：0
摘要：DRF之分页类源码分析
阅读全文 »
发表于 2023-09-19 16:55阅读：93评论：0推荐：0
摘要：DRF之排序类源码分析
阅读全文 »
发表于 2023-09-18 22:07阅读：91评论：0推荐：0
摘要：DRF之过滤类源码分析
阅读全文 »
发表于 2023-09-18 22:07阅读：28评论：0推荐：0
摘要：DRF之频率组件源码分析
阅读全文 »
发表于 2023-09-18 22:07阅读：117评论：0推荐：0
摘要：DRF之权限组件源码分析
阅读全文 »
发表于 2023-09-18 17:12阅读：125评论：0推荐：0
摘要：DRF之登录认证源码分析
阅读全文 »
发表于 2023-09-18 17:11阅读：61评论：0推荐：0
摘要：DRF之Response源码分析
阅读全文 »
发表于 2023-09-18 17:03阅读：60评论：0推荐：0
摘要：【一】引入 鸭子 无论在哪门编程语言中，都离不开我们最熟悉的鸭子模型，因此作者在引入部分也是利用鸭子作为案例引入我们进行入门的学习 【1】鸭子游戏 现在我们需要做一款模拟鸭子游泳的游戏 在游戏中，有不同的鸭子，不同的鸭子都会游泳和呱呱叫 而这款游戏的实现思路就是一个鸭子的超类(Superclass)
阅读全文 »
发表于 2023-09-18 17:03阅读：18评论：0推荐：0
摘要：【一】引入 【二】书籍简介 【1】强大的写作阵容 本书作者Eric Freeman；ElElisabeth Freeman是作家、讲师和技术顾问。 Eric拥有耶鲁大学的计算机科学博士学位，E1isabath拥有耶鲁大学的计算机科学硕士学位。 FHBert Bates是畅销的HeadFirst系列书
阅读全文 »
发表于 2023-09-13 20:48阅读：61评论：0推荐：0
摘要：Django框架高级DRF之请求执行流程和APIView源码分析
阅读全文 »
发表于 2023-09-13 17:00阅读：59评论：0推荐：0
摘要：Django框架高级之DRF中的Request源码分析
阅读全文 »
发表于 2023-09-11 17:42阅读：40评论：0推荐：0
摘要：【一】引入 现在的服务基本是分布式，微服务形式的，而且大数据量也导致分库分表的产生，对于水平分表就需要保证表中 id 的全局唯一性。 对于 MySQL 而言，一个表中的主键 id 一般使用自增的方式，但是如果进行水平分表之后，多个表中会生成重复的 id 值。 那么如何保证水平分表后的多张表中的 id
阅读全文 »
发表于 2023-09-10 20:02阅读：8评论：0推荐：0
该文被密码保护。
发表于 2023-09-10 20:02阅读：2评论：0推荐：0
该文被密码保护。
发表于 2023-09-10 20:01阅读：4评论：0推荐：0
该文被密码保护。
发表于 2023-09-10 20:01阅读：15评论：0推荐：0
该文被密码保护。
发表于 2023-09-10 20:01阅读：3评论：0推荐：0
该文被密码保护。
发表于 2023-09-10 20:00阅读：5评论：0推荐：0
该文被密码保护。
发表于 2023-09-10 19:59阅读：3评论：0推荐：0
该文被密码保护。
发表于 2023-09-10 19:59阅读：4评论：0推荐：0
该文被密码保护。
发表于 2023-09-10 19:58阅读：8评论：0推荐：0
该文被密码保护。
发表于 2023-09-10 19:58阅读：4评论：0推荐：0
该文被密码保护。
发表于 2023-09-10 19:57阅读：12评论：0推荐：0
该文被密码保护。
发表于 2023-09-10 19:57阅读：5评论：0推荐：0
该文被密码保护。
发表于 2023-09-10 19:57阅读：7评论：0推荐：0
该文被密码保护。
发表于 2023-09-10 19:51阅读：18评论：0推荐：0
摘要：【RabbitMQ总结】 【一】消息队列引入 什么是消息队列 消息队列解决的问题 常见的消息队列比较 【二】RabbitMQ安装 什么是 RabbitMQ 服务器原生安装 RabbitMQ 客户端安装 RabbitMQ Windows 安装 RabbitMQ RabbitMQ 设置用户名和密码 Ra
阅读全文 »
发表于 2023-09-10 19:40阅读：115评论：0推荐：0
摘要：【一】咱们开发的环境 【1】Windows开发，Linux上线 在这种情况下，我们可以在Windows上进行开发，然后将项目部署到Linux服务器上。 一般而言，我们可以使用跨平台的开发工具和技术，例如Python、Java等。 这样可以最大程度上减少开发和部署环境之间的差异。 案例： 假设我们正在
阅读全文 »
发表于 2023-09-10 19:39阅读：41评论：0推荐：0
摘要：【引入】 【1】为什么要使用分布式锁 我们在开发应用的时候，如果需要对某一个共享变量进行多线程同步访问的时候，可以使用我们学到的锁进行处理，并且可以完美的运行，毫无Bug！ 注意这是单机应用，后来业务发展，需要做集群，一个应用需要部署到几台机器上然后做负载均衡，大致如下图： 上图可以看到 变量A存在
阅读全文 »
发表于 2023-09-10 19:39阅读：60评论：0推荐：0
摘要：【一】引入 要理解微服务，首先要先理解不是微服务的那些。 通常跟微服务相对的是单体应用，即将所有功能都打包成在一个独立单元的应用程序。 从单体应用到微服务并不是一蹴而就的，这是一个逐渐演变的过程。 本文将以一个网上超市应用为例来说明这一过程。 【二】最初的需求 【1】萌芽 几年前，小明和小皮一起创业
阅读全文 »
发表于 2023-09-10 19:39阅读：648评论：0推荐：1
摘要：【一】RabbitMQ Producer:生产者,消息的提供者 Consumer:消费者,消息的使用者 Broker:MQ服务器，管理队列、消息及相关信息 Message:消息，程序间的通信的数据 Queue:队列，消息存放的容器，消息先进先出 Exchange:交换机，用于分发消息 【二】Rabb
阅读全文 »
发表于 2023-09-10 19:38阅读：68评论：0推荐：0
摘要：【一】RPC介绍 【1】介绍 RPC（Remote Procedure Call）是一种远程过程调用的协议，它允许一个计算机程序通过网络请求调用远程服务器上的一个子程序或函数。 基于RabbitMQ实现的RPC可以更加可靠地实现远程过程调用。 【2】分布式的系统中使用 微服务之间的调用 resful
阅读全文 »
发表于 2023-09-10 19:38阅读：229评论：0推荐：0
摘要：【一】发布订阅 【1】发布者 import pika # 【1】创建连接并设置认证信息 credentials = pika.PlainCredentials("admin","admin") connection = pika.BlockingConnection(pika.ConnectionP
阅读全文 »
发表于 2023-09-10 19:38阅读：25评论：0推荐：0
摘要：【一】闲置消费介绍 正常情况如果有多个消费者，是按照顺序第一个消息给第一个消费者，第二个消息给第二个消费者 但是可能第一个消息的消费者处理消息很耗时，一直没结束，就可以让第二个消费者优先获得闲置的消息 传统情况下，如果有多个消费者，消息会按顺序依次发送给每个消费者。 但是，如果第一个消费者处理消息的
阅读全文 »
发表于 2023-09-10 19:38阅读：82评论：0推荐：0
摘要：【一】消息安全之ack ACK是一种确认机制，用于确保消息在消费者接收后被正确处理。 当消费者接收到消息并成功处理时，它发送一个ACK（Acknowledgement）给生产者，表示消息已经处理完毕。 只有在收到ACK之后，生产者才会从队列中删除该消息。 我们使用RabbitMQ作为消息中间件，并通
阅读全文 »
发表于 2023-09-10 19:37阅读：16评论：0推荐：0
摘要：【一】基于Queue实现生产者消费者模型 import queue import threading message = queue.Queue(10) def producer(i): while True: message.put(i) def consumer(i): while True:
阅读全文 »
发表于 2023-09-10 19:37阅读：138评论：0推荐：0
摘要：【一】RabbitMQ是什么 官网：https://www.rabbitmq.com/getstarted.html 【1】介绍 RabbitMQ 是一个由 Erlang 语言开发的 AMQP 的开源实现。 AMQP ：Advanced Message Queue，高级消息队列协议。 它是应用层协议
阅读全文 »
发表于 2023-09-10 19:37阅读：17评论：0推荐：0
摘要：【一】什么是消息队列 消息队列是一种基于"先进先出"（FIFO）原则的数据结构，用于在分布式系统中进行异步通信和解耦功能模块。 它提供了一种可靠的方式来传递和存储消息，确保消息在发送和接收之间的可靠性和顺序性。 【二】消息队列解决什么问题 【1】应用解耦 通过消息队列，可以将单体应用拆分成多个小功能
阅读全文 »
发表于 2023-09-10 14:19阅读：208评论：0推荐：0
摘要：【1】第一步：配置文件配置多个数据库 在Django的配置文件中的DATABASES参数中，添加多个数据库的配置信息。 每个数据库都需要指定ENGINE（数据库引擎）和NAME（数据库名称），可以根据实际情况选择合适的数据库引擎和数据库名称。 例如，在配置文件中添加两个数据库配置的示例： DATAB
阅读全文 »
发表于 2023-09-10 14:18阅读：23评论：0推荐：0
摘要：【一】引入 之前做过redis的主从，很简单 mysql 稍微复杂一些， 搭建mysql主从的目的是？ 读写分离 单个实例并发量低，提高并发量 只在主库写，读数据都去从库 》读多写少 读写分离 通过将读操作分发到从库，可以分摊主库的读负载，提高整体的并发处理能力。 主库只需处理写操作，从库处理读操作
阅读全文 »
发表于 2023-09-10 14:16阅读：13评论：0推荐：0
摘要：【一】Redis介绍与安装 什么是Redis 非关系型数据库和关系型数据库 Redis的特点 Redis的安装 Redis的连接与停止 【二】Redis使用 Redis普通连接与连接池 Redis之字符串操作 Redis之hash类型操作 Redis之列表操作 Redis之其他操作 Redis之管道
阅读全文 »
发表于 2023-09-10 13:38阅读：69评论：0推荐：0
摘要：【一】缓存的收益与成本 【1】受益 1 加速读写 2 降低后端负载：后端服务器通过前端缓存降低负载，业务端使用redis降低后端mysql负载 【2】成本 1 数据不一致：缓存层和数据层有时间窗口不一致，和更新策略有关 2 代码维护成本：多了一层缓存逻辑 3 运维成本：比如使用了Redis Clus
阅读全文 »
发表于 2023-09-10 13:38阅读：55评论：0推荐：0
摘要：【一】主从复制 【1】引入 原因 ： redis 单实例 机器故障；容量瓶颈；QPS瓶颈 主从复制：一主一从，一主多从 做读写分离 做数据副本 扩展数据性能 一个master可以有多个slave 一个slave只能有一个master 数据流向是单向的，从master到slave 【2】主从原理 主从
阅读全文 »
发表于 2023-09-10 13:37阅读：174评论：0推荐：0
摘要：【一】Redis持久化 【1】什么是持久化 redis的所有数据保存在内存中，对数据的更新将异步的保存到硬盘上 持久化是指将Redis的数据保存到硬盘上，以确保数据在重启、断电等异常情况下的持久性。 Redis提供了三种持久化方式：RDB、AOF和混合持久化。 【2】持久化的实现方式 数据库(mys
阅读全文 »
发表于 2023-09-10 13:37阅读：131评论：0推荐：0
摘要：【一】慢查询 【1】生命周期 我们配置一个时间，如果查询时间超过了我们设置的时间，我们就认为这是一个慢查询. 慢查询发生在第三阶段 客户端超时不一定慢查询，但慢查询是客户端超时的一个可能因素 慢查询是指执行时间超过预设阈值的数据库查询语句。在慢查询的生命周期中，以下是一般的流程： 客户端发送查询请求
阅读全文 »
发表于 2023-09-10 13:36阅读：55评论：0推荐：0
摘要：【图解Redis数据结构】 【Redis单线程架构】 【1】单线程架构 一个瞬间只会执行一条命令 Redis的主要任务是处理来自客户端的请求并执行命令。 在任意时刻，Redis只会处理一条命令，通过串行执行命令保证了数据的一致性。 Redis在内部使用事件驱动（epoll）的非阻塞I/O模型，以提高
阅读全文 »
发表于 2023-09-10 13:36阅读：44评论：0推荐：0
摘要：【一】使用场景 缓存系统：使用最广泛的就是缓存 计数器：网站访问量，转发量，评论数（文章转发，商品销量，单线程模型，不会出现并发问题） 消息队列：发布订阅，阻塞队列实现（简单的分布式，blpop：阻塞队列，生产者消费者） 排行榜：有序集合（阅读排行，点赞排行，推荐（销量高的，推荐））有序集合 社交网
阅读全文 »
发表于 2023-09-10 13:36阅读：82评论：0推荐：0
摘要：【一】Redis是什么 【1】介绍 开源：早起版本2w3千行 基于键值对的存储系统：字典形式 多种数据结构：字符串，hash，列表，集合，有序集合 高性能，功能丰富 Redis（Remote Dictionary Server）是一个开源的，基于键值对的存储系统。 它采用了字典形式进行数据存储，支持
阅读全文 »
发表于 2023-09-10 13:36阅读：32评论：0推荐：0
摘要：【一】redis普通链接和连接池 【1】普通链接 from redis import Redis # 建立redis连接 conn = Redis( host='127.0.0.1', # IP port=6379, # 端口 db=0, # 数据库 decode_responses=True #
阅读全文 »
发表于 2023-09-10 13:36阅读：138评论：0推荐：0
摘要：【一】什么是Redis Redis ：软件，存储数据的，速度非常快，redis是一个key-value存储系统（没有表的概念），cs架构的软件 服务端 客户端（python作为客户端，java，go，图形化界面，命令窗口的命令） Redis（Remote Dictionary Server）是一个开
阅读全文 »
发表于 2023-09-05 19:36阅读：748评论：0推荐：0
摘要：# 【一】自建站SSL证书的痛点 ## 【1】引言 - 自己瞎折腾，搭建了一个个人的博客平台(https://lupf.cn)；作为程序员，B格还是得有的，因此，SSL证书也就必须得安排上呢，不然一访问，显示不安全的链接，有点丢不起那个人。 - 可是，各大云平台的免费SSL证书，都只支持二级域名，没
阅读全文 »
发表于 2023-09-05 19:36阅读：289评论：0推荐：0
摘要：# 【一】使用七牛云托管 ## 【1】注册七牛云账号： - 首先，您需要访问七牛云官方网站并注册一个账号。提供必要的信息完成注册流程后，您将获得一个七牛云账号。 - 官网 - https://www.qiniu.com/?cps_key=1hk4r1ha80spe  - fd 支持大多数主流操作系统，快来更新你的工具箱
阅读全文 »
发表于 2023-09-01 14:40阅读：72评论：0推荐：0
摘要：刷题！刷题！刷题！进步！进步！进步！
阅读全文 »
发表于 2023-09-01 14:39阅读：83评论：0推荐：0
摘要：总结一些我在学习过程中，在Windows本地或者在我的服务器上部署过的框架。
阅读全文 »
发表于 2023-09-01 14:27阅读：1026评论：0推荐：0
摘要：随着社会的飞速进步，ChatGPT已经成为了我们生活中重要的组成部分，但是奈何文心一言的等诸多模型我们这平民根本运行不起来，于是相对方便的搭建方案他来了！
阅读全文 »
发表于 2023-09-01 14:24阅读：1116评论：0推荐：0
摘要：在开发过程中，我们一般都是用服务器的docker容器，或者是虚拟机运行的docker容器，这些多多少少有一些不方便，于是在本地搭建docker环境也是必须掌握的技能之一，本文将介绍如何在Windows本地搭建Docker
阅读全文 »