梭梭666 - 博客园

2019年10月21日

摘要： 1、常用命令查看MySQL提供的所有存储引擎 mysql> show engines; 从上图我们可以查看出 MySQL 当前默认的存储引擎是InnoDB,并且在5.7版本所有的存储引擎中只有 InnoDB 是事务性存储引擎，也就是说只有 InnoDB 支持事务。查看MySQL当前默认的存储引擎阅读全文

posted @ 2019-10-21 23:15 梭梭666 阅读(116) 评论(0) 推荐(0) 编辑

MySQL 索引相关

摘要： 03索引相关 1.为什么索引能提高查询速度 **先从 MySQL 的基本存储结构说起，MySQL的基本存储结构是页 (记录都存在页里边) ：** 各个数据页可以组成一个双向链表每个数据页中的记录又可以组成一个单向链表每个数据页都会为存储在它里边儿的记录生成一个页目录，在通过主键查找某条记录的时候阅读全文

posted @ 2019-10-21 23:13 梭梭666 阅读(120) 评论(0) 推荐(0) 编辑

Mysql 事务相关

摘要： MySQL介绍什么是MySQL？ MySQL 是一种关系型数据库，在Java企业级开发中非常常用，因为 MySQL 是开源免费的，并且方便扩展。阿里巴巴数据库系统也大量用到了 MySQL，因此它的稳定性是有保障的。MySQL是开放源代码的，因此任何人都可以在 GPL(General Publi 阅读全文

posted @ 2019-10-21 23:10 梭梭666 阅读(161) 评论(0) 推荐(0) 编辑

2019年7月6日

Web 请求之--性能相关

摘要：本博客代码运行环境以下所有代码都以爬虫为例，发送 http 请求，获取页面源码。概念回顾线程与进程的共同点和区别 HTTP 协议 HTTP 特点 HTTP 协议数据发送格式 HTTP 请求协议请求头： HTTP 响应协议例： HTTP/1.1 200 OK\r\nDate：Fri, 阅读全文

posted @ 2019-07-06 14:43 梭梭666 阅读(322) 评论(0) 推荐(0) 编辑

2019年7月1日

RabbitMQ 全套

摘要：本博客代码运行环境 ErLang: ErLang_X64_22 version RabbitMQ: RabbitMQ_Server_3.7.15 version python : Python 3.7.1rc1 version pip ： pip 19.1.1 version pika : pika 阅读全文

posted @ 2019-07-01 19:36 梭梭666 阅读(526) 评论(0) 推荐(0) 编辑

2019年5月27日

基于 Scrapy-redis 两种形式的分布式爬虫

摘要：基于 Scrapy-redis 两种形式的分布式爬虫基于 Scrapy-redis 两种形式的分布式爬虫 redis 分布式部署 1、scrapy 框架是否可以自己实现分布式? 答:不可以，原因有二: 其一: 因为多台机器上部署的 Scrapy 会各自拥有各自的调度器，这样就使得多台机器无法分配阅读全文

posted @ 2019-05-27 19:33 梭梭666 阅读(216) 评论(0) 推荐(0) 编辑

增量式爬虫

摘要：增量式爬虫¶ 需求: 定时更新程序以便爬取网站中最近更新的数据¶ 一、增量式爬虫¶ 概念: 通过爬虫程序检测某网站数据更新的情况，以便可以爬取到该网站更新出的新数据如何进行增量式的爬取工作: 在发送请求之前判断此 URL 是不是之前爬过在解析内容之后判断这部分内容之前是否爬过在写入阅读全文

posted @ 2019-05-27 19:32 梭梭666 阅读(175) 评论(0) 推荐(0) 编辑

爬虫示例--requests-module

摘要： reuqests_test In [2]: import requests In [ ]: # 爬取一张图片，并做持久化保存 import requests url = 'https://ss1.bdstatic.com/70cFvXSh_Q1YnxGkpoWK1HF6hhy/it/u=2381 阅读全文

posted @ 2019-05-27 19:31 梭梭666 阅读(169) 评论(0) 推荐(0) 编辑

Ajax 全套

摘要：概述对于WEB应用程序：用户浏览器发送请求，服务器接收并处理请求，然后返回结果，往往返回就是字符串（HTML），浏览器将字符串（HTML）渲染并显示浏览器上。原生的Ajax 1、XmlHttpRequest对象介绍 Ajax主要就是使用【XmlHttpRequest】对象来完成请求的操作，该对阅读全文

posted @ 2019-05-27 19:29 梭梭666 阅读(144) 评论(0) 推荐(0) 编辑