摘要: 知识点一:BeautifulSoup库详解及其基本使用方法 什么是BeautifulSoup 什么是BeautifulSoup 灵活又方便的网页解析库,处理高效,支持多种解析器。利用它不用编写正则表达式即可方便实现网页信息的提取库。 BeautifulSoup中常见的解析库 BeautifulSou 阅读全文
posted @ 2018-08-08 19:58 达尔文在思考 阅读(306) 评论(0) 推荐(0) 编辑
摘要: 知识点一:正则表达式详解及其基本使用方法 什么是正则表达式 什么是正则表达式 正则表达式对子符串操作的一种逻辑公式,就是事先定义好的一些特定字符、及这些特定字符的组合,组成一个‘规则字符串’,这个‘规则字符串’用来表达对字符串的一种过滤逻辑。 (非Python独有,re模块实现) 测试正则表达式的网 阅读全文
posted @ 2018-08-08 09:35 达尔文在思考 阅读(400) 评论(0) 推荐(0) 编辑
摘要: 知识点一:Requests的详解及其基本使用方法 什么是requests库 什么是requests库 Requests库是用Python编写的,基于urllib,采用Apache2 Licensed开源协议的HTTP库,相比urllib库,Requests库更加方便,可以节约我们大量的工作,完全满足 阅读全文
posted @ 2018-08-07 16:08 达尔文在思考 阅读(2080) 评论(0) 推荐(0) 编辑
摘要: 知识点一:urllib的详解及基本使用方法 一、基本介绍 urllib是python的一个获取url(Uniform Resource Locators,统一资源定址器)了,我们可以利用它来抓取远程的数据进行保存。 二、什么是Urllib Python内置的Http请求库,包含四个模块: urlli 阅读全文
posted @ 2018-05-31 11:37 达尔文在思考 阅读(566) 评论(0) 推荐(0) 编辑
摘要: 知识点一:爬虫的基本原理梳理 一、什么是爬虫? 请求网站并提取数据的自动化程序 二、爬虫的基本流程 1:向服务器发起请求 通过HTTP库向目标站点发起请求,即发送一个Request,请求可以包含额外的headers等信息,等待服务器的响应。 2:获取响应内容 如果服务器正常响应,会得到一个Respo 阅读全文
posted @ 2018-05-29 15:58 达尔文在思考 阅读(274) 评论(0) 推荐(0) 编辑
摘要: 知识点十九:MySQL的备份的还原(38) 一、mysql的备份 1、通过使用mysqldump的命令备份 使用mysqldump命令备份,mysqldump命令将数据库中的数据备份成一个文本文件。表的结构和表中的数据将存储在生成的文本文件中。 mysqldump命令的工作原理很简单。它先查出需要备 阅读全文
posted @ 2018-05-21 17:29 达尔文在思考 阅读(193) 评论(0) 推荐(0) 编辑
摘要: 知识点十八:MySQL定期维护(37) 一、Mysql的定时器 所谓的定时器,指的是在某个时间段去执行同样的代码。比如闹钟。每到指定的时间闹铃就会响。同样的,我们这个定时器,只要满足我们的一个定时条件,只要说我们每隔5秒,或者每隔1秒, 那么这里面每隔5秒,或者每隔1秒就是它的定时条件,只要满足这个 阅读全文
posted @ 2018-05-21 16:28 达尔文在思考 阅读(238) 评论(0) 推荐(0) 编辑
摘要: 知识点十七:MySQL监控(35) 一、为什么使用MySQL监控 随着软件后期的不断升级,myssql的服务器数量越来越多,软硬件故障的发生概率也越来越高。这个时候就需要一套监控系统,当主机发生异常时,此时通过监控系统发现和处理。 这个监控实际上是在我们的开发完成之后,这个时候软件就开始在运行,这个 阅读全文
posted @ 2018-05-21 15:09 达尔文在思考 阅读(168) 评论(0) 推荐(0) 编辑
摘要: 知识点十六:MySQL的账号权限赋予(33) 一、MySQL权限简介 关于mysql的权限简单的理解就是mysql允许你做你全力以内的事情,不可以越界。比如只允许你执行select操作,那么你就不能执行update操作。只允许你从某台机器上连接mysql,那么你就不能从除那台机器以外的其他机器连接m 阅读全文
posted @ 2018-05-21 12:25 达尔文在思考 阅读(177) 评论(0) 推荐(0) 编辑
摘要: 知识点十五:MySQL 的应用程序优化(32) 一、访问数据库采用连接池 把连接当做对象或设备,统一放在‘连接池’里。凡是需要访问数据库的地方都从连接池里取连接 二、采用缓存减少对于MySQL的访问: 1.避免对同一数据做重复检索 have_query_cache:表明服务器在安装时是否已经配置了高 阅读全文
posted @ 2018-05-21 08:42 达尔文在思考 阅读(148) 评论(0) 推荐(0) 编辑