05 2022 档案

摘要:之前写爬虫使用的都是强制等待,这么做的话会有问题,有的时候网络环境不好的话,那么可能始终加载不出来,所以本次采用了显示等待 隐式等待是在加载整个网页加载完成,所以还是使用显示等待,等待某个元素出现,这样会比较好一些 读取网络路径的文件出了一点儿问题,以前都是读取本地文件的 那么就读取下来 from 阅读全文
posted @ 2022-05-29 16:02 Mokou 阅读(194) 评论(0) 推荐(0) 编辑
摘要:jupyter notebook 因为之前写爬虫项目时候总是要从头开始开始跑 所以这次就安装一个jupyter,因为可以保存变量,方便我逐步调参 在终端输入 pip install jupyter 在目录下打开并且终端输入 jupyter notebook 这样就可以在网页中使用jupyter no 阅读全文
posted @ 2022-05-26 09:18 Mokou 阅读(436) 评论(0) 推荐(0) 编辑
摘要:学习内容 今天主要要做的就是将爬取到的数据放入excel文件之中 在使用selenium的时候,需要解析网页数据的话,使用driver.page_source获取到网页源代码,再使用lxml解析最方便 还踩了一个坑:将循环得到的字典添加到列表中,输出的结果出现重复最后一个字典,要把字典声明放在循环内 阅读全文
posted @ 2022-05-26 07:52 Mokou 阅读(73) 评论(0) 推荐(0) 编辑
摘要:前言 今天发现昨天的想法有误了,动态获取到的html文件,后面如果使用requests去获取的话就是静态html文件,那么就有可能得不到真实的html文件,大部分网站是不会变的,但是像大连交易所的网站就会动态加载,需要使用selenium来获取html文件 经过反复排查比对,发现是html的注释部分 阅读全文
posted @ 2022-05-24 21:42 Mokou 阅读(70) 评论(0) 推荐(0) 编辑
摘要:学习内容 Selenium是一个浏览器自动化操作框架。可以模拟用户操作。这样我们就可以用selenium做很多事情了,测试自动化,爬虫等等 但是我要写的脚本要在很多台电脑上运行,所以我要使用一个通用的脚本来支持在win7/win10上都可以运行,我要找到同时支持两个系统的浏览器内核 因为我打算写个自 阅读全文
posted @ 2022-05-23 21:53 Mokou 阅读(56) 评论(0) 推荐(0) 编辑
摘要:前言 因为我使用docker来部署软路由系统,有点儿不稳定,所以改实体路由器刷软路由 降级 先进入红米的后台看看系统的版本号,如果过高就要降级回2.0.7 下载链接:http://cdn.cnbj1.fds.api.mi-img.com/xiaoqiang/rom/rm2100/miwifi_rm2 阅读全文
posted @ 2022-05-21 00:37 Mokou 阅读(5976) 评论(1) 推荐(0) 编辑
摘要:学习内容 xpath,以及python字符串替换, url自适应拼接,因为很多网站的href不完整 使用Selenium 抓取动态页面内容 前言 这次要实现的是根据网址和xpath,去抓取同一页面中的所有公告内容 代码 源码 import requests from lxml import etre 阅读全文
posted @ 2022-05-20 19:41 Mokou 阅读(48) 评论(0) 推荐(0) 编辑
摘要:开启hyper-V docker会用到的虚拟化 在管理员powershell中输入 Enable-WindowsOptionalFeature -Online -FeatureName Microsoft-Hyper-V -All 注册dockerhub Docker Hub 注册好了后会进入下载页 阅读全文
posted @ 2022-05-19 16:53 Mokou 阅读(760) 评论(0) 推荐(0) 编辑
摘要:前言 根据一个excel(xlsx)文件中的某一个格子颜色发生变化,发送定制的信息的邮件 奇怪的需求XD 因为那个excel的内容是实时变化的 最后的结果如下 代码 #!/usr/bin/python # -*- coding: UTF-8 -*- # 调用SMTP服务器 import smtpli 阅读全文
posted @ 2022-05-19 16:08 Mokou 阅读(71) 评论(0) 推荐(0) 编辑
摘要:本文所有内容来自于233网课,个人学习笔记仅作参考,请勿用来盈利 全课程索引:https://www.cnblogs.com/mokou/p/16180249.html 阅读全文
posted @ 2022-05-18 22:36 Mokou 阅读(28) 评论(0) 推荐(0) 编辑
摘要:今天朋友问了我这么一个数学题目,反正是概率论的 我没玩过游戏王,所以按照他的想法写了以下代码,这份代码主要是用来计算收益的 顺便试了一下jupyterhub,共同编辑一份代码 效果如下 这个卡名的①②的效果1回合各能使用1次。 ①:自己主要阶段才能发动。这张卡从手卡特殊召唤,从自己手卡选1只怪兽送去 阅读全文
posted @ 2022-05-16 23:46 Mokou 阅读(413) 评论(0) 推荐(0) 编辑
摘要:本文所有内容来自于233网课,个人学习笔记仅作参考,请勿用来盈利 全课程索引:https://www.cnblogs.com/mokou/p/16180249.html 阅读全文
posted @ 2022-05-13 09:48 Mokou 阅读(91) 评论(0) 推荐(0) 编辑
摘要:本文所有内容来自于233网课,个人学习笔记仅作参考,请勿用来盈利 全课程索引:https://www.cnblogs.com/mokou/p/16180249.html 阅读全文
posted @ 2022-05-13 09:41 Mokou 阅读(47) 评论(0) 推荐(0) 编辑
摘要:昨天珈乐毕业的消息传出来,所以今天晚上看直播 我以为去年的728之后,我成为乐子人后,不会再对这些虚拟的人物产生悲伤的感情了 虚拟人的表情都做得很生动,但是唯独没有做哭泣的表情,让观众看不出演员的心情 而我却在今晚的直播里看到难过的表情,我的心情感到很压抑 我和学校的同学十几人一起连麦看直播,大家也 阅读全文
posted @ 2022-05-12 00:42 Mokou 阅读(204) 评论(0) 推荐(0) 编辑
摘要:本文所有内容来自于233网课,个人学习笔记仅作参考,请勿用来盈利 全课程索引:https://www.cnblogs.com/mokou/p/16180249.html 阅读全文
posted @ 2022-05-11 09:45 Mokou 阅读(58) 评论(0) 推荐(0) 编辑
摘要:本文所有内容来自于233网课,个人学习笔记仅作参考,请勿用来盈利 全课程索引:https://www.cnblogs.com/mokou/p/16180249.html 阅读全文
posted @ 2022-05-10 00:37 Mokou 阅读(52) 评论(0) 推荐(0) 编辑
摘要:因为需要在单位用pycharm实在是太卡了,所以换成网页的编辑器 安装操作系统 本文使用的镜像:Ubuntu - Official Image | Docker Hub docker pull ubuntu:20.04 很小,下载一小会就结束了然后运行这个docker 这里开放的8888端口指的是一 阅读全文
posted @ 2022-05-09 00:04 Mokou 阅读(1029) 评论(0) 推荐(0) 编辑
摘要:jupyter 搬运要改路径 docker run --name jupyter -v /home/mokou/jupyter/work:/home/jovyan/work -d -p 7000:8888 jupyter/datascience-notebook start-notebook.sh 阅读全文
posted @ 2022-05-08 14:44 Mokou 阅读(155) 评论(0) 推荐(0) 编辑
摘要:本文所有内容来自于233网课,个人学习笔记仅作参考,请勿用来盈利 全课程索引:https://www.cnblogs.com/mokou/p/16180249.html 阅读全文
posted @ 2022-05-06 15:10 Mokou 阅读(56) 评论(0) 推荐(0) 编辑
摘要:本文所有内容来自于233网课,个人学习笔记仅作参考,请勿用来盈利 全课程索引:https://www.cnblogs.com/mokou/p/16180249.html 阅读全文
posted @ 2022-05-05 14:09 Mokou 阅读(39) 评论(0) 推荐(0) 编辑
摘要:本文所有内容来自于233网课,个人学习笔记仅作参考,请勿用来盈利 全课程索引:https://www.cnblogs.com/mokou/p/16180249.html 阅读全文
posted @ 2022-05-04 13:16 Mokou 阅读(55) 评论(0) 推荐(0) 编辑
摘要:前期准备 一台拥有公网IP的服务器,且安装好docker 如果是在家中自己搭建的服务器,那么需要购买域名,和在自己家的软路由上开启动态DNS 这样子就可以解决PPPOE拨号后形成的动态IP的问题 起因 因为朋友的朋友在YY语音被封了,所以弃用YY(而且YY的广告好多,界面不够直观 Discord在国 阅读全文
posted @ 2022-05-02 21:31 Mokou 阅读(4629) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示