摘要: urllib 库设置代理的方法 案例如下: 阅读全文
posted @ 2018-08-23 13:51 北鼻coder 阅读(521) 评论(0) 推荐(0) 编辑
摘要: 在urllib 中,要进行post请求时,需传入相应的data值,这里通过http://www.iqianyue.com/mypost这个网站进行测试。 案例代码如下: 注意:对于需要传入的data 数据,需要进行urlencode编码。postdata=urllib.parse.urlencode 阅读全文
posted @ 2018-08-23 13:44 北鼻coder 阅读(5967) 评论(0) 推荐(0) 编辑
摘要: 对于urllib中的get请求方式,可以直接传入url的连接即可访问页面,但是对于要传入关键字的话,也可以用quote进行编码再传入。 案例如下: 可以传入关键字key="关键字",用key1_url=urllib.request.quote(key1)进行编码,最后将字符串连接起来得到all_ur 阅读全文
posted @ 2018-08-23 13:38 北鼻coder 阅读(273) 评论(0) 推荐(0) 编辑
摘要: 2018-08-23 13:07:57 对于请求一些网站,我们需要加上请求头才可以完成网页的抓取,不然会得到一些错误,无法返回抓取的网页。下面,介绍两种添加请求头的方法。 方法一:借助build_opener和addheaders完成 注意:此处的headers要写为一个元组类型才可以。写为字典类型 阅读全文
posted @ 2018-08-23 13:23 北鼻coder 阅读(9445) 评论(0) 推荐(0) 编辑
摘要: 非关系型数据库MongoDB入门 本文分为以下四块简单介绍非关系型数据库MongoDB:1.MongoDB简介、2.MongoDB和关系数据库对比、3.MongoDB基本概念、4.mongo shell的使用以及对MongoDB的增删改查操作 Ⅰ、MongoDB简介 MongoDB是一款基于分布式文 阅读全文
posted @ 2018-08-23 09:36 北鼻coder 阅读(107) 评论(0) 推荐(0) 编辑