会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
Skypeduty
博客园
首页
新随笔
联系
订阅
管理
上一页
1
2
3
4
5
6
下一页
2022年3月25日
Windows下的PyCharm与Ubuntu下的Python的交互
摘要: Windows下的PyCharm与Ubuntu下的Python的交互 实验环境: Windows10 Ubuntu18.04 Pycharm2019.1.2(专业版) Python3.6.5 1、在Windows下与Ubuntu下新建目录,作为两个环节之间的连接桥梁 1.1 在Windows下的D盘
阅读全文
posted @ 2022-03-25 11:01 Skypeduty
阅读(1056)
评论(0)
推荐(0)
编辑
2022年3月23日
关于Ubuntu下离线安装Python-- 以python3.6.5为例
摘要: 关于Ubuntu下离线安装Python-- 以python3.6.5为例 实验环境 : VM16 Ubuntu18.04 python3.6.5.tgz 1 安装包准备: 切换到 主目录下的下载文件夹,下载软件包版本(在有网的pc端进入官网https://www.python.org/downloa
阅读全文
posted @ 2022-03-23 11:34 Skypeduty
阅读(1719)
评论(0)
推荐(0)
编辑
2021年12月8日
爬虫之模拟登录、自动获取cookie值、验证码识别
摘要: 爬虫之模拟登录、自动获取cookie值、验证码识别 1、爬取网页分析 2、验证码识别 3、cookie自动获取 4、程序源代码 chaojiying.py sign in.py 1、爬取网页分析 爬取的目标网址为:https://www.gushiwen.cn/ 在登陆界面需要做的工作有,获取验证码
阅读全文
posted @ 2021-12-08 15:52 Skypeduty
阅读(1556)
评论(0)
推荐(0)
编辑
Python爬虫之Requests模块session进行登录状态保持
摘要: 一、利用requests.session进行登录状态保持 Requests模块中的session类能够自动处理发送请求获取响应过程中产生的cookie,进而达到状态保持的目的。 接下来我们通过requests.session登录GitHub网学习 1、requests.session的作用以及应用场
阅读全文
posted @ 2021-12-08 15:31 Skypeduty
阅读(3411)
评论(0)
推荐(0)
编辑
2021年11月26日
Python与数据库--python与MySQL的交互
摘要: Python与MySQL的交互操作 安装mysql模块 # pip install -i https://pypi.doubanio.com/simple/ python-mysql # 支持 2.x版本 pip install -i https://pypi.doubanio.com/simple
阅读全文
posted @ 2021-11-26 16:10 Skypeduty
阅读(185)
评论(0)
推荐(0)
编辑
Python与数据库--MySQL的基本操作
摘要: 数据库的基本操作 数据库的连接与退出 输入 mysql -uroot -p 然后输入数据库密码 登录成功后,输入如下命令 查看版本:select version(); 显示当前时间:select now(); 退出登录,可以使用 quit 或者 exit 数据库操作 创建数据库 create dat
阅读全文
posted @ 2021-11-26 15:38 Skypeduty
阅读(45)
评论(0)
推荐(0)
编辑
Python与数据库--Window下Mysql数据库的安装与管理
摘要: Windows安装MySQL5.7教程 1.检查及卸载原版本 我们可以检查下我们的系统服务确定下有没有安装过MySQL,打开Windows系统服务有以下两种方式: 1 右击我的电脑/计算机,点击管理,打开计算机管理,依次选择服务和应用程序——服务。 2 使用快捷命令:同时按下win+r键
阅读全文
posted @ 2021-11-26 15:16 Skypeduty
阅读(121)
评论(0)
推荐(0)
编辑
2021年11月17日
抓取 Bilibili 弹幕数据并进行数据分析
摘要: 视频地址 https://www.bilibili.com/bangumi/play/ss39462?spm_id_from=333.851.b_62696c695f7265706f72745f616e696d65.52 弹幕地址 固定的url地址 + 视频的cid+.xml -- 源码搜索cid
阅读全文
posted @ 2021-11-17 20:09 Skypeduty
阅读(980)
评论(0)
推荐(1)
编辑
抓取 RiceData 数据
摘要: 完整代码 -- 爬取国家粮食局历年水稻数据 import requests from lxml import etree import time #获取 urls_province # 获取源码 headers = { "User-Agent":"Mozilla/5.0 (Windows NT 10
阅读全文
posted @ 2021-11-17 19:58 Skypeduty
阅读(419)
评论(0)
推荐(1)
编辑
2021年11月16日
抓取微信公众号文章
摘要: 1 在电脑上登录微信 2 打开fiddler抓包软件,然后打开电脑版微信,找到需要爬取的公众号, 3 点击公众号,再点击查看历史信息 4进入历史信息界面如下 5 向下滑动右侧的滚动条,同时观察fiddler上的抓包信息,这里为了便于分析 ,可以添加过滤规则 在Fiddler的filter添加过滤规则
阅读全文
posted @ 2021-11-16 11:06 Skypeduty
阅读(1894)
评论(0)
推荐(0)
编辑
上一页
1
2
3
4
5
6
下一页
公告