selenium&phantomjs实战--漫话爬取
摘要：
为什么直接保存当前网页，而不是找到所有漫话链接，再有针对性的保存图片？ 因为防盗链的原因，当直接保存漫话链接图片时，只能保存到防盗链的图片。 阅读全文
posted @ 2017-01-14 12:33 孔扎根 阅读(456) 评论(0) 推荐(0) 编辑
selenium&phantom实战--获取代理数据
摘要：
获取快代理网站的数据 注意： 阅读全文
posted @ 2017-01-13 16:15 孔扎根 阅读(884) 评论(0) 推荐(0) 编辑
selenium&PhantomJS笔记
摘要：
配置pip文件 Windows下pip 配置文件的位置%HOME%/pip/pip.ini linux下安装pip,以Debian Linux为例su -apt-get install python-pip linux下pip的配置文件是$HOME/.pip/pip.conf 验证安装源是否修改成功 阅读全文
posted @ 2017-01-12 18:58 孔扎根 阅读(393) 评论(0) 推荐(0) 编辑
phantomJs页面操作
摘要：
因为phantomjs能加载和操纵页面，它可以自动化地完美执行页面的各种操作。 操作文档： 脚本的被执行，就像它真的正在web 浏览器上运行一样。 下面的脚本，是读取元素id为myagent的文本内容 2、从1.6版本开始，你可以使用page.includeJs加载jquery到页面中 3、如果我们 阅读全文
posted @ 2017-01-11 15:51 孔扎根 阅读(9014) 评论(0) 推荐(0) 编辑
phantomJs 快速入门学习 了解大概
摘要：
1、hellow程序 一个永远的开头，创建一个文件hello.js。内容如下 运行程序 2、页面加载 创建一个文件myload.js webpage是phantomjs的最重要的一个函数，用于初始化一个无头浏览器实例。 运行程序，此时c:\myjs\下生成了examp.jpg图片 3、加载速度测试 阅读全文
posted @ 2017-01-11 11:44 孔扎根 阅读(796) 评论(0) 推荐(0) 编辑
jquery循环操作
摘要：
each遍历 用法一、 用法二、 $.each(data,function(index,element){}) 阅读全文
posted @ 2017-01-05 14:54 孔扎根 阅读(391) 评论(0) 推荐(0) 编辑
requests高级用法
摘要：
会话对象 当你向同一主机发送多个请求时，session会重用底层的tcp连接，从而提升性能，同时session也会为所有请求保持 cookie。 session可以保持cookie来访问后续同一服务器上的地址 可以修改session的属性(cookies,headers)来为请求方法(get,pos 阅读全文
posted @ 2016-12-30 12:56 孔扎根 阅读(562) 评论(0) 推荐(0) 编辑
requests 快速入门
摘要：
Requests 是使用 Apache2 Licensed 许可证的 基于Python开发的HTTP 库，其在Python内置模块的基础上进行了高度的封装，从而使得Pythoner进行网络请求时，变得美好了许多，使用Requests可以轻而易举的完成浏览器可有的任何操作。 先来看看GET请求吧 GE 阅读全文
posted @ 2016-12-29 09:49 孔扎根 阅读(363) 评论(0) 推荐(0) 编辑
python使用xlrd模块读写excel
摘要：
1、行列索引均从0开始2、int数据被读成float数据，解决办法，if type(value) == float and value%1 == 0,value= int(value)模块读 #!/usr/bin/env python # _*_ coding:utf-8 _*_ import xlrd # 将工作簿加载到内存 data = xlrd.open_workbook(r'c:\d... 阅读全文
posted @ 2016-12-23 11:27 孔扎根 阅读(1871) 评论(0) 推荐(0) 编辑
