2022年3月25日

摘要: Windows下的PyCharm与Ubuntu下的Python的交互 实验环境: Windows10 Ubuntu18.04 Pycharm2019.1.2(专业版) Python3.6.5 1、在Windows下与Ubuntu下新建目录,作为两个环节之间的连接桥梁 1.1 在Windows下的D盘 阅读全文
posted @ 2022-03-25 11:01 Skypeduty 阅读(1006) 评论(0) 推荐(0) 编辑

2022年3月23日

摘要: 关于Ubuntu下离线安装Python-- 以python3.6.5为例 实验环境 : VM16 Ubuntu18.04 python3.6.5.tgz 1 安装包准备: 切换到 主目录下的下载文件夹,下载软件包版本(在有网的pc端进入官网https://www.python.org/downloa 阅读全文
posted @ 2022-03-23 11:34 Skypeduty 阅读(1611) 评论(0) 推荐(0) 编辑

2021年12月8日

摘要: 爬虫之模拟登录、自动获取cookie值、验证码识别 1、爬取网页分析 2、验证码识别 3、cookie自动获取 4、程序源代码 chaojiying.py sign in.py 1、爬取网页分析 爬取的目标网址为:https://www.gushiwen.cn/ 在登陆界面需要做的工作有,获取验证码 阅读全文
posted @ 2021-12-08 15:52 Skypeduty 阅读(1408) 评论(0) 推荐(0) 编辑
 
摘要: 一、利用requests.session进行登录状态保持 Requests模块中的session类能够自动处理发送请求获取响应过程中产生的cookie,进而达到状态保持的目的。 接下来我们通过requests.session登录GitHub网学习 1、requests.session的作用以及应用场 阅读全文
posted @ 2021-12-08 15:31 Skypeduty 阅读(3255) 评论(0) 推荐(0) 编辑

2021年11月26日

摘要: Python与MySQL的交互操作 安装mysql模块 # pip install -i https://pypi.doubanio.com/simple/ python-mysql # 支持 2.x版本 pip install -i https://pypi.doubanio.com/simple 阅读全文
posted @ 2021-11-26 16:10 Skypeduty 阅读(178) 评论(0) 推荐(0) 编辑
 
摘要: 数据库的基本操作 数据库的连接与退出 输入 mysql -uroot -p 然后输入数据库密码 登录成功后,输入如下命令 查看版本:select version(); 显示当前时间:select now(); 退出登录,可以使用 quit 或者 exit 数据库操作 创建数据库 create dat 阅读全文
posted @ 2021-11-26 15:38 Skypeduty 阅读(44) 评论(0) 推荐(0) 编辑
 
摘要: Windows安装MySQL5.7教程 1.检查及卸载原版本 ​ 我们可以检查下我们的系统服务确定下有没有安装过MySQL,打开Windows系统服务有以下两种方式: ​ 1 右击我的电脑/计算机,点击管理,打开计算机管理,依次选择服务和应用程序——服务。 ​ 2 使用快捷命令:同时按下win+r键 阅读全文
posted @ 2021-11-26 15:16 Skypeduty 阅读(119) 评论(0) 推荐(0) 编辑

2021年11月17日

摘要: 视频地址 https://www.bilibili.com/bangumi/play/ss39462?spm_id_from=333.851.b_62696c695f7265706f72745f616e696d65.52 弹幕地址 固定的url地址 + 视频的cid+.xml -- 源码搜索cid 阅读全文
posted @ 2021-11-17 20:09 Skypeduty 阅读(928) 评论(0) 推荐(1) 编辑
 
摘要: 完整代码 -- 爬取国家粮食局历年水稻数据 import requests from lxml import etree import time #获取 urls_province # 获取源码 headers = { "User-Agent":"Mozilla/5.0 (Windows NT 10 阅读全文
posted @ 2021-11-17 19:58 Skypeduty 阅读(394) 评论(0) 推荐(1) 编辑

2021年11月16日

摘要: 1 在电脑上登录微信 2 打开fiddler抓包软件,然后打开电脑版微信,找到需要爬取的公众号, 3 点击公众号,再点击查看历史信息 4进入历史信息界面如下 5 向下滑动右侧的滚动条,同时观察fiddler上的抓包信息,这里为了便于分析 ,可以添加过滤规则 在Fiddler的filter添加过滤规则 阅读全文
posted @ 2021-11-16 11:06 Skypeduty 阅读(1811) 评论(0) 推荐(0) 编辑