摘要: 开始之前要先在MySQL创建一个名为spider的数据库,在里面创建一个名caipiao的表,表里面三个字段,data,red,blue 点击查看代码 import requests import pymysql from lxml import etree # 连接数据库 conn = pymys 阅读全文
posted @ 2023-04-11 15:59 shuxi_520 阅读(1021) 评论(0) 推荐(0) 编辑
摘要: import pymysql # 打开数据库连接 db = pymysql.connect(host='localhost', user='root', password='root', database='pikachu', port=3306 ) # 使用 cursor() 方法创建一个游标对象 阅读全文
posted @ 2023-04-11 15:55 shuxi_520 阅读(21) 评论(0) 推荐(0) 编辑
摘要: 多线程:两种方法 # # 多线程 # from threading import Thread # 导入线程类 # # # def fun(name): # for i in range(100): # print(name, i) # # # if __name__ == "__main__": 阅读全文
posted @ 2023-03-17 00:23 shuxi_520 阅读(26) 评论(0) 推荐(0) 编辑
摘要: import requests from lxml import etree import os # 拿到视频地址url url = 'https://www.pearvideo.com/video_1160135' # 提取url中的cont_id,后面用 cont_id = url.split( 阅读全文
posted @ 2023-03-15 21:44 shuxi_520 阅读(57) 评论(0) 推荐(0) 编辑
摘要: # 登录小说网,拿到cookie # 带着cookie请求网站,拿到书架上的内容 # 使用session进行请求(持续请求,在这个过程中,cookie不会丢失) import requests import json url = 'https://passport.17k.com/ck/user/l 阅读全文
posted @ 2023-03-14 21:13 shuxi_520 阅读(56) 评论(0) 推荐(0) 编辑
摘要: # 导入需要的模块 import requests import os from lxml import etree # 请求网页 url = 'https://aspx.sc.chinaz.com/query.aspx?' headers = { 'User-Agent': 'Mozilla/5. 阅读全文
posted @ 2023-03-14 14:07 shuxi_520 阅读(55) 评论(0) 推荐(0) 编辑
摘要: import requests from lxml import etree url = 'https://shenzhen.zbj.com/search/service/?l=0&kw=saas&r=2' response = requests.get(url).text # 请求网址,并以tex 阅读全文
posted @ 2023-03-14 11:57 shuxi_520 阅读(72) 评论(0) 推荐(0) 编辑
摘要: import requests from lxml import etree import os url = 'https://pic.netbian.com/4kmeinv/index.html' headers = { 'user-agent': 'Mozilla/5.0 (Windows NT 阅读全文
posted @ 2023-03-13 13:12 shuxi_520 阅读(69) 评论(0) 推荐(0) 编辑
摘要: import requests from lxml import etree url = "https://fy.58.com/ershoufang/?PGTID=0d100000-0091-53ca-4993-576198ca62e3" headers={ "user-agent": "Mozil 阅读全文
posted @ 2023-03-13 11:44 shuxi_520 阅读(125) 评论(0) 推荐(0) 编辑
摘要: 百度翻译(有点潦草,懒得优化) 看运行结果: 过程:F12,输入一个单词,找到带有翻译结果的数据包,查看请求方式,请求的url,payload 代码: # 导入模块 import requests import json word = input("输入要翻译的单词:") # 制定URL url = 阅读全文
posted @ 2023-03-12 17:02 shuxi_520 阅读(19) 评论(0) 推荐(0) 编辑