LettersfromSuperz

  博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

2019年6月25日

摘要: Scarpy爬虫框架 https://www.cnblogs.com/kermitjam/articles/10147261.html?tdsourcetag=s_pctim_aiomsg 高并发的爬虫框架 Runspider只能执行某个 爬虫程序.py文件 将项目根目录导入 Xpath语法 获取内 阅读全文
posted @ 2019-06-25 11:44 LettersfromSuperz 阅读(145) 评论(0) 推荐(0) 编辑

2019年6月21日

摘要: BeautifulSoup 解析库 https://www.cnblogs.com/kermitjam/p/10863925.html 主要功能:从网页爬取数据 但是这个库需要依赖一个解析器 !!! 主要解析器,及其优缺点: 文档树 通过下一个标签查找 遍历文档树 返回一个生成器(generator 阅读全文
posted @ 2019-06-21 15:44 LettersfromSuperz 阅读(185) 评论(0) 推荐(0) 编辑

摘要: 课堂记录: Actionchains控制某种动作 Js 获取class属性 Getelements 获取id Getelement 完整图片属性由None隐藏修改为 block显示 Ways: 找缺口: 注意 像素差 (也会有迷惑你的像素差模块) 从60开始循环所有的x轴 像素值差等于或者大于60 阅读全文
posted @ 2019-06-21 14:40 LettersfromSuperz 阅读(116) 评论(0) 推荐(0) 编辑

2019年6月19日

摘要: 课堂记录: selenium剩余部分 Selenium选择器之Xpath语法: Xpath语法查找元素: driver.find_element_by_xpath(‘/...’) #/是从跟开始找 跟开始位置的第一个元素 driver.find_element_by_xpath(‘//...’) # 阅读全文
posted @ 2019-06-19 11:22 LettersfromSuperz 阅读(122) 评论(0) 推荐(0) 编辑

2019年6月18日

摘要: 课堂记录: Python是由上至下运行的 到你下面变量定义重复了 变成了字符串类型 再往前 get请求直接访问 携带用户的信息(name password) requests之POST请求 cookie存在客户端服务器中 Session 维持会话 在服务端存放用户信息 为了密码用户信息的安全 用户体 阅读全文
posted @ 2019-06-18 10:38 LettersfromSuperz 阅读(106) 评论(0) 推荐(0) 编辑

摘要: 课堂笔记: 爬虫:爬取数据 互联网:由一堆网络设备把一台一台的计算机互联到一起 互联网建立的目的:数据的传递与共享 上网的全过程: 普通用户:打开浏览器——往目标站点(服务器)发送请求——接收响应数据——渲染到页面上 爬虫程序:模拟浏览器——往目标站点(服务器)发送请求——接收响应数据——提取有用的 阅读全文
posted @ 2019-06-18 09:52 LettersfromSuperz 阅读(273) 评论(0) 推荐(0) 编辑

2019年6月14日

摘要: 函数剩余部分 函数的三种定义方式 1 # 函数的三种定义方式 2 # 无参函数 3 # 不需要接收外部传入的参数 4 def foo(): 5 print('from foo..') 6 foo() 7 8 9 10 # 有参函数 11 # 需要接收外部传入的参数 12 def login(user 阅读全文
posted @ 2019-06-14 10:50 LettersfromSuperz 阅读(198) 评论(0) 推荐(0) 编辑

2019年6月13日

摘要: 一、课堂代码敲一遍 此处省略,内容可参考课堂记录 ps:选中 Ctrl+/ 注释 Crtl+d 复制当行内容 Tab 往右四个空格 Shift+tab 往左减四个空格 二、课堂记录 数据类型剩余的内置方法 列表类型内置方法 https://www.cnblogs.com/kermitjam/p/10 阅读全文
posted @ 2019-06-13 00:13 LettersfromSuperz 阅读(163) 评论(0) 推荐(0) 编辑

2019年6月11日

摘要: 1.课堂例子敲两遍 此处省略,具体见课堂内容记录。 2. 1 name = " aleX" 2 print(name.strip()) 3 4 print(name.startswith("al")) 5 6 print(name.endswith("X")) 7 8 name = name.rep 阅读全文
posted @ 2019-06-11 21:03 LettersfromSuperz 阅读(202) 评论(0) 推荐(0) 编辑