摘要: 第一步: 先分析这个url,”?“后面的都是它的关键字,requests中get函数的关键字的参数是params,post函数的关键字参数是data, 关键字用字典的形式传进去,这样我们就可以自己改关键字去搜索别的东西或者是搜索别的页面,我对手机比较感兴趣所以 就爬取了关于手机的页面。 第二步: 直 阅读全文
posted @ 2019-08-04 15:48 嗨学编程 阅读(849) 评论(0) 推荐(0) 编辑
摘要: 转载:https://www.cnblogs.com/binglansky/p/8534544.html 开发环境: python2.7 + win10 开始先说一下,访问youtube需要那啥的,请自行解决,最好是全局代理。 实现代码: coding:utf 8 author : Corleone 阅读全文
posted @ 2019-08-04 14:25 嗨学编程 阅读(1277) 评论(0) 推荐(0) 编辑
摘要: 安装开发需要的一些库 (1) 安装mysql 的驱动:在Windows上按win+r输入cmd打开命令行,输入命令pip install pymysql,回车即可。 (2) 安装自动化测试的驱动selenium:在命令行中输入pip install selenium回车。 (3) 安装标签解析库py 阅读全文
posted @ 2019-08-04 14:12 嗨学编程 阅读(1106) 评论(0) 推荐(0) 编辑
摘要: 因为进程也不是越多越好,我们计划分3个进程执行。意思就是 :把总共要抓取的28页分成三部分。 怎么分呢? 看上面代码,我们就把1~29分成了三部分,list里三个range。 2、还记得我们抓取基金网站内容的getData()函数? 函数是有2个参数:一个开始页码,一个结束页码,也就是从第start 阅读全文
posted @ 2019-07-22 20:26 嗨学编程 阅读(493) 评论(0) 推荐(0) 编辑
摘要: 通过python配合爬虫接口利用selenium实现自动化打开chrome浏览器,进行百度关键词搜索。 1、安装python3,访问官网选择对应的版本安装即可,最新版为3.7。 2、安装selenium库。 使用 pip install selenium 安装即可。 同时需要安装chromedriv 阅读全文
posted @ 2019-07-22 14:10 嗨学编程 阅读(1930) 评论(0) 推荐(0) 编辑
摘要: 学Python要避免哪些坑?零基础怎么入门Python?Python入门简单、语法简洁、功能强大,非常适合零基础入门IT行业的人学习。随着人工智能时代的来临,企业纷纷选择使用Python进行开发,Python从业人员需求及薪资福利也在不断提高。很多人选择学Python,但零基础学Python一定要避 阅读全文
posted @ 2019-07-20 15:45 嗨学编程 阅读(383) 评论(0) 推荐(0) 编辑
摘要: 爬虫的抓取方式有好几种,正则表达式,Lxml(xpath)与BeautifulSoup,我在网上查了一下资料,了解到三者之间的使用难度与性能 三种爬虫方式的对比。 这样一比较我我选择了Lxml(xpath)的方式了,虽然有三种方式,但肯定是要选择最好的方式来爬虫,这个道理大家都懂,另外有兴趣的朋友也 阅读全文
posted @ 2019-07-19 14:52 嗨学编程 阅读(556) 评论(0) 推荐(0) 编辑
摘要: 爬取公众号的方式常见的有两种 通过搜狗搜索去获取,缺点是只能获取最新的十条推送文章 通过微信公众号的素材管理,获取公众号文章。缺点是需要申请自己的公众号。 今天介绍一种通过抓包PC端微信的方式去获取公众号文章的方法。相比其他的方法非常方便。 如上图,通过抓包工具获取微信的网络信息请求,我们发现每次下 阅读全文
posted @ 2019-07-17 14:52 嗨学编程 阅读(682) 评论(0) 推荐(0) 编辑
摘要: 第一个案例 首先开始来绘制你的第一个图表 '''遇到不懂的问题?Python学习交流群:1004391443满足你的需求,资料都已经上传群文件,可以自行下载!''' add() 主要方法,用于添加图表的数据和设置各种配置项 print_echarts_options() 打印输出图表的所有配置项 r 阅读全文
posted @ 2019-07-08 15:18 嗨学编程 阅读(864) 评论(0) 推荐(0) 编辑
摘要: 最近有个比较要好的朋友问我能不能从监控视频里识别到从监控跟前经过的指定的人。因为他们单位的监控室经常要花大量的人力跟时间去找某个人在哪个位置出现过的证据。听起来像是一份比较有挑战性的任务,就答应他试试看。 先理一下思路,首先要做的工作是从视频中将人脸给框出来,然后拿到这个人脸跟给定的人脸进行对比,如 阅读全文
posted @ 2019-06-11 15:46 嗨学编程 阅读(708) 评论(0) 推荐(0) 编辑