08 2022 档案
摘要：Mysql主从搭建 # 什么是主从同步？ 一个主库，写数据都写到主库，从库只用来读数据，可以一主一从，可以是一主多从 两台机器：主库，从库 （mysql版本必须一致） # 原理 mysql主从配置的流程大体如图： 1）master会将变动记录到二进制日志(binlog)里面(主库要开启binlog日
阅读全文
摘要：docker入门介绍 # 什么是虚拟化 在计算机中，虚拟化（英语：Virtualization）是一种资源管理技术，是将计算机的各种实体资源，如服务器、网络、内存及存储等，予以抽象、转换后呈现出来，打破实体结构间的不可切割的障碍，使用户可以比原本的组态更好的方式来应用这些资源。这些资源的新虚拟部份是
阅读全文
摘要：sqlalchemy介绍和快速使用 sqlalchemy：独立的orm框架，轻松的集成到任意项目中去，SQLAlchemy是一个基于Python实现的ORM框架。该框架建立在 DB API之上，使用关系对象映射进行数据库操作，简言之便是：将类和对象转换成SQL，然后使用数据API执行SQL并获取执行
阅读全文
摘要：Flask介绍和安装 Django大而全(3.x以后支持异步)，Flask：小而精，插件的支持 异步框架：Sanic，FastAPI python异步的orm框架：aiomysql，aioredis # 介绍 Flask是一个基于Python开发并且依赖jinja2模板(DTL)和Werkzeug
阅读全文
摘要：scrapy介绍和安装 爬虫框架scrapy，在固定位置写固定代码，就能完成爬虫的功能 # 安装： -pip3 install scrapy （mac，linux） -win：看人品 1、pip3 install wheel #安装后，便支持通过wheel文件安装软件，wheel文件官网：https
阅读全文
摘要：selenium基本使用 由于requests不能执行js，有的页面内容，我们在浏览器中可以看到，但是请求下来没有 》selenium模块：模拟操作浏览器，完成人的行为。 selenium最初是一个自动化测试工具,而爬虫中使用它主要是为了解决requests无法直接执行JavaScript代码的问题
阅读全文
摘要：爬虫介绍 # 大部分软件，cs，bs，主流都是用http协议通信，模拟发送http请求 服务端把数据返回(html,xml,json) 数据的清洗（re，bs4） 入库（文件，mysql，redis，es，mongo） -mysql：tcp自定定制的协议 -redis：tcp自定定制的协议 -doc
阅读全文
