上一页 1 ··· 18 19 20 21 22 23 24 25 26 ··· 30 下一页
摘要: 小程序官方文档 全局配置 在 app.js 中 阅读全文
posted @ 2019-02-21 15:19 流年中渲染了微笑 阅读(167) 评论(0) 推荐(0) 编辑
摘要: 安装好微信开发工具是这样子 登陆 出现上面的画面 第一个项目搭建完成 阅读全文
posted @ 2019-02-19 15:58 流年中渲染了微笑 阅读(161) 评论(0) 推荐(0) 编辑
摘要: 1 注册 首先 打开(https://mp.weixin.qq.com/)微信公众平台官网 选着 小程序 之后 在新的页面选择 选着前往注册 按照提示注册 注意:个人版和企业版有一定的区别 2 开发者 要注意小程序id和公总号id 的区别 要成为开发者 登陆成功之后 按下图操作 3 下载开发者工具 阅读全文
posted @ 2019-02-19 15:16 流年中渲染了微笑 阅读(229) 评论(0) 推荐(0) 编辑
摘要: 一、下载 二、解压 三、配置 四、环境变量 五、安装MySQL服务 六、启动MySQL服务 七、停止MySQL 一、下载 第一步:打开网址,https://www.mysql.com,点击downloads之后跳转到https://www.mysql.com/downloads 第二步 :跳转至网址 阅读全文
posted @ 2019-01-11 15:36 流年中渲染了微笑 阅读(244) 评论(0) 推荐(0) 编辑
摘要: scrapy框架之持久化操作 基于终端指令的持久化存储 基于管道的持久化存储 1 基于终端指令的持久化存储 保证爬虫文件的parse方法中有可迭代类型对象(通常为列表or字典)的返回,该返回值可以通过终端指令的形式写入指定格式的文件中进行持久化操作。 以爬取糗事百科(https://www.qius 阅读全文
posted @ 2019-01-08 10:57 流年中渲染了微笑 阅读(205) 评论(0) 推荐(0) 编辑
摘要: 1,下载Redis,这里打算使用3.0的版本 下载地址:http://redis.io/download 需要注意的是,windows版本的redis只支持64位操作系统,其他的就不要考虑了 2,将下载下来的压缩包解压,例如:将 Redis-x64-3.0.500.zip 解压到 D:\reids\ 阅读全文
posted @ 2019-01-08 10:54 流年中渲染了微笑 阅读(214) 评论(0) 推荐(0) 编辑
摘要: 一 什么是scrapy框架 官方解释 自己理解 二 scrapy框架的安装 三 基本使用 步骤: 1 创建工程 2 进去第二层目录--创建爬虫应该程序 3 编写爬虫文件 4 修改setting文件 5 执行爬虫 具体: 1 创建工程 2 进去第二层目录--创建爬虫应该程序 3 编写爬虫文件--在执行 阅读全文
posted @ 2019-01-03 09:36 流年中渲染了微笑 阅读(246) 评论(0) 推荐(0) 编辑
摘要: selenuim和phantonJs处理网页动态加载数据的爬取 一 图片懒加载 自己理解 就是在打开一个页面的时候,图片数量特别多,图片加载会增加服务器的压力,所以我们在这个时候,就会用到 懒加载,,网页解析是从上往下的。在解析的过程里,如果遇见资源了,浏览器会再次请求的。但是一个网页可能存在很多请 阅读全文
posted @ 2019-01-02 15:42 流年中渲染了微笑 阅读(412) 评论(0) 推荐(0) 编辑
摘要: 基于requests模块的cookie操作 引言:有些时候,我们在使用爬虫程序去爬取一些用户相关信息的数据(爬取某个人“人人网”个人主页数据)时,如果使用之前requests模块常规操作时,往往达不到我们想要的目的 例如:我们要得到如下的形式 但是,我们通过之前所学习的知识 得到的是, 呀 呀 呀 阅读全文
posted @ 2018-12-24 21:33 流年中渲染了微笑 阅读(665) 评论(0) 推荐(0) 编辑
摘要: 数据解析三种方式 正则解析 Xpath解析 BeautifulSoup解析 一 正则解析 1 常用正则表达式回顾 单字符: . : 除换行以外所有字符 [] :[aoe] [a-w] 匹配集合中任意一个字符 \d :数字 [0-9] \D : 非数字 \w :数字、字母、下划线、中文 \W : 非\ 阅读全文
posted @ 2018-12-24 11:53 流年中渲染了微笑 阅读(791) 评论(0) 推荐(0) 编辑
上一页 1 ··· 18 19 20 21 22 23 24 25 26 ··· 30 下一页