LettersfromSuperz

摘要： Scarpy爬虫框架 https://www.cnblogs.com/kermitjam/articles/10147261.html?tdsourcetag=s_pctim_aiomsg 高并发的爬虫框架 Runspider只能执行某个 爬虫程序.py文件 将项目根目录导入 Xpath语法 获取内 阅读全文

摘要： BeautifulSoup 解析库 https://www.cnblogs.com/kermitjam/p/10863925.html 主要功能：从网页爬取数据 但是这个库需要依赖一个解析器 ！！！ 主要解析器，及其优缺点： 文档树 通过下一个标签查找 遍历文档树 返回一个生成器（generator 阅读全文

摘要： 课堂记录： Actionchains控制某种动作 Js 获取class属性 Getelements 获取id Getelement 完整图片属性由None隐藏修改为 block显示 Ways： 找缺口： 注意 像素差 （也会有迷惑你的像素差模块） 从60开始循环所有的x轴 像素值差等于或者大于60 阅读全文

摘要： 课堂记录： selenium剩余部分 Selenium选择器之Xpath语法： Xpath语法查找元素： driver.find_element_by_xpath(‘/...’) #/是从跟开始找 跟开始位置的第一个元素 driver.find_element_by_xpath(‘//...’) # 阅读全文

摘要： 课堂记录： Python是由上至下运行的 到你下面变量定义重复了 变成了字符串类型 再往前 get请求直接访问 携带用户的信息(name password) requests之POST请求 cookie存在客户端服务器中 Session 维持会话 在服务端存放用户信息 为了密码用户信息的安全 用户体 阅读全文

摘要： 课堂笔记： 爬虫：爬取数据 互联网:由一堆网络设备把一台一台的计算机互联到一起 互联网建立的目的：数据的传递与共享 上网的全过程： 普通用户：打开浏览器——往目标站点（服务器）发送请求——接收响应数据——渲染到页面上 爬虫程序：模拟浏览器——往目标站点（服务器）发送请求——接收响应数据——提取有用的 阅读全文

摘要： 函数剩余部分 函数的三种定义方式 1 # 函数的三种定义方式 2 # 无参函数 3 # 不需要接收外部传入的参数 4 def foo(): 5 print('from foo..') 6 foo() 7 8 9 10 # 有参函数 11 # 需要接收外部传入的参数 12 def login(user 阅读全文

摘要： 一、课堂代码敲一遍 此处省略，内容可参考课堂记录 ps：选中 Ctrl+/ 注释 Crtl+d 复制当行内容 Tab 往右四个空格 Shift+tab 往左减四个空格 二、课堂记录 数据类型剩余的内置方法 列表类型内置方法 https://www.cnblogs.com/kermitjam/p/10 阅读全文

摘要： 1.课堂例子敲两遍 此处省略，具体见课堂内容记录。 2. 1 name = " aleX" 2 print(name.strip()) 3 4 print(name.startswith("al")) 5 6 print(name.endswith("X")) 7 8 name = name.rep 阅读全文