上一页 1 2 3 4 5 6 7 8 ··· 10 下一页
摘要: 一、pop()方法删除key Python字典是一种无序的映射数据类型,通过键值对的形式进行存储,可以使用键来快速找到对应的值。在某些情况下,我们可能需要在字典中删除某个键,这时候就可以使用Python字典提供的pop()方法。 pop()方法用于删除字典中指定的键,并返回该键对应的值。使用该方法时 阅读全文
posted @ 2023-11-22 16:31 嗨学编程 阅读(699) 评论(0) 推荐(0) 编辑
摘要: 前言 其实很简短就是利用爬虫的第三方库Requests与BeautifulSoup。 其实就几行代码,但希望没有开发基础的人也能一下子看明白,所以大神请绕行。 基本环境配置 python 版本:2.7 IDE :pycharm 相关模块 完整代码 阅读全文
posted @ 2019-08-06 20:21 嗨学编程 阅读(740) 评论(0) 推荐(0) 编辑
摘要: 1.抓取索引页内容 利用requests请求目标站点,得到索引网页HTML代码,返回结果。 2.抓取详情页内容 解析返回结果,得到详情页的链接,并进一步抓取详情页的信息。 获取页面网址: 单个页面代码: 图片地址 3.下载图片与保存数据库 将图片下载到本地,并把页面信息及图片URL保存到MongDB 阅读全文
posted @ 2019-08-06 14:41 嗨学编程 阅读(433) 评论(0) 推荐(1) 编辑
摘要: 用到的包有requests BeautSoup 我爬的是天涯论坛的财经论坛:‘http://bbs.tianya.cn/list.jsp?item=develop’ 它里面的其中的一个帖子的URL:‘http://bbs.tianya.cn/post develop 2279340 1.shtml’ 阅读全文
posted @ 2019-08-04 15:49 嗨学编程 阅读(675) 评论(0) 推荐(0) 编辑
摘要: 第一步: 先分析这个url,”?“后面的都是它的关键字,requests中get函数的关键字的参数是params,post函数的关键字参数是data, 关键字用字典的形式传进去,这样我们就可以自己改关键字去搜索别的东西或者是搜索别的页面,我对手机比较感兴趣所以 就爬取了关于手机的页面。 第二步: 直 阅读全文
posted @ 2019-08-04 15:48 嗨学编程 阅读(820) 评论(0) 推荐(0) 编辑
摘要: 转载:https://www.cnblogs.com/binglansky/p/8534544.html 开发环境: python2.7 + win10 开始先说一下,访问youtube需要那啥的,请自行解决,最好是全局代理。 实现代码: coding:utf 8 author : Corleone 阅读全文
posted @ 2019-08-04 14:25 嗨学编程 阅读(1256) 评论(0) 推荐(0) 编辑
摘要: 安装开发需要的一些库 (1) 安装mysql 的驱动:在Windows上按win+r输入cmd打开命令行,输入命令pip install pymysql,回车即可。 (2) 安装自动化测试的驱动selenium:在命令行中输入pip install selenium回车。 (3) 安装标签解析库py 阅读全文
posted @ 2019-08-04 14:12 嗨学编程 阅读(1089) 评论(0) 推荐(0) 编辑
摘要: 因为进程也不是越多越好,我们计划分3个进程执行。意思就是 :把总共要抓取的28页分成三部分。 怎么分呢? 看上面代码,我们就把1~29分成了三部分,list里三个range。 2、还记得我们抓取基金网站内容的getData()函数? 函数是有2个参数:一个开始页码,一个结束页码,也就是从第start 阅读全文
posted @ 2019-07-22 20:26 嗨学编程 阅读(491) 评论(0) 推荐(0) 编辑
摘要: 通过python配合爬虫接口利用selenium实现自动化打开chrome浏览器,进行百度关键词搜索。 1、安装python3,访问官网选择对应的版本安装即可,最新版为3.7。 2、安装selenium库。 使用 pip install selenium 安装即可。 同时需要安装chromedriv 阅读全文
posted @ 2019-07-22 14:10 嗨学编程 阅读(1899) 评论(0) 推荐(0) 编辑
摘要: 学Python要避免哪些坑?零基础怎么入门Python?Python入门简单、语法简洁、功能强大,非常适合零基础入门IT行业的人学习。随着人工智能时代的来临,企业纷纷选择使用Python进行开发,Python从业人员需求及薪资福利也在不断提高。很多人选择学Python,但零基础学Python一定要避 阅读全文
posted @ 2019-07-20 15:45 嗨学编程 阅读(380) 评论(0) 推荐(0) 编辑
上一页 1 2 3 4 5 6 7 8 ··· 10 下一页