上一页 1 ··· 5 6 7 8 9 10 11 12 13 ··· 63 下一页
摘要: 版本控制系统介绍 Git简介 Git centos 安装 Git 的配置 Git初始化仓库 git 命令 git status add rm commit mv git 命令 git diff 查看 Git 区域文件的具体改动 git 命令 查看历史提交 git log git 仓库 回退功能 gi 阅读全文
posted @ 2019-08-26 16:00 minger_lcm 阅读(206) 评论(0) 推荐(0) 编辑
摘要: 版本控制系统 什么是版本控制 版本控制(Revision control)是一种在开发的过程中用于管理我们对文件、目录或工程等内容的修改历史,方便查看更改历史记录,备份以便恢复以前的版本的软件工程技术。 版本控制的目的 实现跨区域多人协同开发追踪和记载一个或者多个文件的历史记录组织和保护你的源代码和 阅读全文
posted @ 2019-08-26 15:59 minger_lcm 阅读(3051) 评论(0) 推荐(0) 编辑
摘要: 基于requests模块发起ajax的post请求 需求:爬取肯德基餐厅查询http://www.kfc.com.cn/kfccda/index.aspx中指定某个城市地点的餐厅数据 点击肯德基餐厅查询页面 输入北京点击查询是一个提交form表单,异步ajax的post请求,使用抓包工具抓取请求 基 阅读全文
posted @ 2019-08-23 17:24 minger_lcm 阅读(7879) 评论(1) 推荐(2) 编辑
摘要: 基于requests模块发起ajax的get请求 需求:爬取豆瓣电影分类排行榜 https://movie.douban.com/中的电影详情数据 用抓包工具捉取 使用ajax加载页面的请求 鼠标往下下滚轮拖动页面,会加载更多的电影信息,这个局部刷新是当前页面发起的ajax请求, 用抓包工具捉取页面 阅读全文
posted @ 2019-08-19 23:28 minger_lcm 阅读(4063) 评论(0) 推荐(0) 编辑
摘要: 需求:爬取搜狗首页的页面数据 requests模块如何处理携带参数的get请求,返回携带参数的请求 需求:指定一个词条,获取搜狗搜索结果所对应的页面数据 之前urllib模块处理url上参数有中文的需要处理编码,requests会自动处理url编码 发起带参数的get请求 params可以是传字典或 阅读全文
posted @ 2019-08-19 18:41 minger_lcm 阅读(1531) 评论(0) 推荐(0) 编辑
摘要: urllib模块发起的POST请求 案例:爬取百度翻译的翻译结果 1.通过浏览器捉包工具,找到POST请求的url 针对ajax页面请求的所对应url获取,需要用到浏览器的捉包工具。查看百度翻译针对某个字条发送ajax请求,所对应的url 点击clear按钮可以把抓包工具,所抓到请求清空 然后填上翻 阅读全文
posted @ 2019-08-18 15:59 minger_lcm 阅读(5559) 评论(0) 推荐(0) 编辑
摘要: requests模块(response常用属性) 基于requests模块的get请求 基于requests模块发起ajax的get请求 基于requests模块发起ajax的post请求 阅读全文
posted @ 2019-08-17 22:19 minger_lcm 阅读(353) 评论(0) 推荐(0) 编辑
摘要: response常用属性 阅读全文
posted @ 2019-08-17 22:18 minger_lcm 阅读(1560) 评论(0) 推荐(0) 编辑
摘要: 方法: 使用urlencode函数 urllib.request.urlopen() 开发者工具浏览器按F12或者右键按检查 ,有个抓包工具network,刷新页面,可以看到网页资源,可以看到请求头信息,UA 在抓包工具点击任意请求,可以看到所有请求信息,向应信息, 主要用到headers,resp 阅读全文
posted @ 2019-08-17 16:01 minger_lcm 阅读(874) 评论(0) 推荐(0) 编辑
摘要: 案例:爬取使用搜狗根据指定词条搜索到的页面数据(例如爬取词条为‘周杰伦’的页面数据) 编码错误 【注意】上述代码中url存在非ascii编码的数据,则该url无效。如果对其发起请求,则会报如下错误: url的特性:url不可以存在非ASCII编码字符数据,url必须为ASCII编码的数据值。所以我们 阅读全文
posted @ 2019-08-14 16:32 minger_lcm 阅读(644) 评论(0) 推荐(0) 编辑
上一页 1 ··· 5 6 7 8 9 10 11 12 13 ··· 63 下一页