琴棋书画123 - 博客园

2 selenium提取数据

摘要： selenium提取数据知识点：了解 driver对象的常用属性和方法掌握 driver对象定位标签元素获取标签对象的方法掌握标签对象提取文本和属性值的方法 1. driver对象的常用属性和方法在使用selenium过程中，实例化driver对象后，driver对象有一些常用的属性和方阅读全文

posted @ 2022-10-20 11:36 琴棋书画123 阅读(82) 评论(0) 推荐(0) 编辑

1selenium的介绍

摘要： selenium的介绍知识点：了解 selenium的工作原理了解 selenium以及chromedriver的安装掌握标签对象click点击以及send_keys输入 1. selenium运行效果展示 Selenium是一个Web的自动化测试工具，最初是为网站自动化测试而开发的，Se 阅读全文

posted @ 2022-10-20 11:36 琴棋书画123 阅读(46) 评论(0) 推荐(0) 编辑

http协议复习

摘要： http协议复习知识点掌握 http以及https的概念和默认端口掌握爬虫关注的请求头和响应头了解常见的响应状态码理解浏览器和爬虫爬取的区别一提起http协议，大家都会想起它是一个应用层协议，那么http协议跟爬虫有什么关系呢？请看下图： 1. http以及https的概念和区别阅读全文

posted @ 2022-10-20 11:33 琴棋书画123 阅读(54) 评论(0) 推荐(0) 编辑

爬虫概述

摘要：爬虫概述知识点：了解爬虫的概念了解爬虫的作用了解爬虫的分类掌握爬虫的流程 1. 爬虫的概念模拟浏览器，发送请求，获取响应网络爬虫（又被称为网页蜘蛛，网络机器人）就是模拟客户端(主要指浏览器)发送网络请求，接收请求响应，一种按照一定的规则，自动地抓取互联网信息的程序。原则上,只阅读全文

posted @ 2022-10-20 11:32 琴棋书画123 阅读(151) 评论(0) 推荐(0) 编辑

requests模块

摘要： requests模块知识点：掌握 headers参数的使用掌握发送带参数的请求掌握 headers中携带cookie 掌握 cookies参数的使用掌握 cookieJar的转换方法掌握超时参数timeout的使用掌握代理ip参数proxies的使用掌握使用verify参数忽阅读全文

posted @ 2022-10-20 11:32 琴棋书画123 阅读(56) 评论(0) 推荐(0) 编辑

数据提取-lxml模块

摘要：数据提取-lxml模块知识点了解 lxml模块和xpath语法的关系了解 lxml模块的使用场景了解 lxml模块的安装了解谷歌浏览器xpath helper插件的安装和使用掌握 xpath语法-基础节点选择语法掌握 xpath语法-节点修饰语法掌握 xpath语法-其他常用语法阅读全文

posted @ 2022-10-20 11:31 琴棋书画123 阅读(105) 评论(0) 推荐(0) 编辑

10、深入Python输入和输出

摘要：在很多时候，你会想要让你的程序与用户（可能是你自己）交互。你会从用户那里得到输入，然后打印一些结果。我们可以使用iinput和print语句来完成这些功能。 input name = input('your name:') gender = input('you are a boy?(y/n)') 阅读全文

posted @ 2022-10-19 23:57 琴棋书画123 阅读(74) 评论(0) 推荐(0) 编辑

9、深入Python条件和循坏

摘要：条件控制简单来说：当判断的条件为真时，执行某种代码逻辑，这就是条件控制。那么在讲条件控制之前，可以给大家讲一个程序员当中流传的比较真实的一个例子说有一天一个程序员，他的媳妇让他去出去买两个包子，那出去之前，他媳妇这么跟他说的，说老公你出去给我买两个包子，如果看见卖西瓜的就买一个回来。结果这阅读全文

posted @ 2022-10-19 23:57 琴棋书画123 阅读(22) 评论(0) 推荐(0) 编辑

8、深入Python字典和集合

摘要：字典和集合字典是一系列无序元素的组合，其长度大小可变，元素可以任意地删减和改变。不过要注意，这里的元素，是一对键（key）和值（value）相比于列表和元组，字典的性能更优，特别是对于查找、添加和删除，字典都能在常数的时间复杂度内完成而集合和字典基本相同，唯一的区别，就是集合没有键和值的配对是阅读全文

posted @ 2022-10-19 23:56 琴棋书画123 阅读(33) 评论(0) 推荐(0) 编辑

7、深入Python列表和元组

摘要：什么是列表和元组列表是动态的，长度大小不固定，可以随意地增加、删减或者改变而元组是静态的，长度大小固定，无法增加删减或者改变定义列表和函数 l = [1, 2, 'hello', 'world'] # 列表中同时含有 int 和 string 类型的元素 l [1, 2, 'hello', ' 阅读全文

posted @ 2022-10-19 23:56 琴棋书画123 阅读(47) 评论(0) 推荐(0) 编辑