随笔分类 - Python
摘要:前言 经过一系列的学习,现在想入门kaggle上面的实操,多为模仿 参考链接:机器学习入门:Kaggle -titanic(泰坦尼克)生存预测 # This Python 3 environment comes with many helpful analytics libraries instal
阅读全文
摘要:前言 由于winserver的hyper-v还挺方便的,所以本次的想法是在win的基础上搭一个Debian,然后安装docker版的jupyter,因为docker可以开机自启动,比较方便,这样子win只作为一个宿主机,不需要我进行开机启动 创建虚拟机 名称随意吧 选择第二代 选择4G,反正后期也能
阅读全文
摘要:资料来源 ShusenTang/Dive-into-DL-PyTorch: 本项目将《动手学深度学习》(Dive into Deep Learning)原书中的MXNet实现改为PyTorch实现。 (github.com) 代码部分 %matplotlib inline import torch
阅读全文
摘要:参考资料 ShusenTang/Dive-into-DL-PyTorch: 本项目将《动手学深度学习》(Dive into Deep Learning)原书中的MXNet实现改为PyTorch实现。 (github.com) python数组冒号取值操作 - python中冒号的用法 - 实验室设备
阅读全文
摘要:参考资料 ShusenTang/Dive-into-DL-PyTorch: 本项目将《动手学深度学习》(Dive into Deep Learning)原书中的MXNet实现改为PyTorch实现。 (github.com) .requires_grad Tensor是这个包的核心类,如果将其属性.
阅读全文
摘要:【2022.11.04】pytorch的初始化 前言 参考代码来自于:Fafa-DL/Lhy_Machine_Learning: 李宏毅2021春季机器学习课程课件及作业 (github.com) 数据集来自于:https://github.com/ga642381/ML2021-Spring/bl
阅读全文
摘要:Pytorch的使用相关,学习来源:https://www.bilibili.com/video/BV1Wv411h7kN/?p=6 加载数据有两种方法,一种是torch.utils.data.Dataset,一种是torch.utils.data.Dataloader Tensor是高维阵列 张量
阅读全文
摘要:COLAB网站:https://colab.research.google.com/ 感觉和jupyter的样子挺像的 左上选择增加代码文本 在代码面前加上!,模拟linux的命令 但是要使用cd的话,则要使用%来作为开头 使用CTRL+enter来执行当前框的代码 可以切换到GPU运行类型,并且使
阅读全文
摘要:学习来源均来自:https://www.bilibili.com/video/BV1Wv411h7kN 当我们设定函数的时候,不一定是线性的情况下,可以将一个曲线图拆分成多个函数相加 正如下图中的红色图,是由四条曲线相加得到 如果要将折线图模拟成曲线图的话,一般使用sigmoid来逼近原来的折线图
阅读全文
摘要:发包给数据库 def send_to_db(sql,data): conn = pymysql.connect(host='', user='', password='', port=, database='', autocommit=True ) cursor = conn.cursor(curs
阅读全文
摘要:查有什么数据库 import pymysql conn = pymysql.connect(host='', user='root', password='123456', port=) cursor = conn.cursor(cursor=pymysql.cursors.DictCursor)
阅读全文
摘要:主要是datetime和str之间的互相转化 记录一下 import time import datetime import json # a = datetime.datetime.now() # b = a.strftime("%Y%m%d") # c = a + datetime.timede
阅读全文
摘要:jupyter notebook 因为之前写爬虫项目时候总是要从头开始开始跑 所以这次就安装一个jupyter,因为可以保存变量,方便我逐步调参 在终端输入 pip install jupyter 在目录下打开并且终端输入 jupyter notebook 这样就可以在网页中使用jupyter no
阅读全文
摘要:学习内容 今天主要要做的就是将爬取到的数据放入excel文件之中 在使用selenium的时候,需要解析网页数据的话,使用driver.page_source获取到网页源代码,再使用lxml解析最方便 还踩了一个坑:将循环得到的字典添加到列表中,输出的结果出现重复最后一个字典,要把字典声明放在循环内
阅读全文
摘要:前言 今天发现昨天的想法有误了,动态获取到的html文件,后面如果使用requests去获取的话就是静态html文件,那么就有可能得不到真实的html文件,大部分网站是不会变的,但是像大连交易所的网站就会动态加载,需要使用selenium来获取html文件 经过反复排查比对,发现是html的注释部分
阅读全文
摘要:学习内容 Selenium是一个浏览器自动化操作框架。可以模拟用户操作。这样我们就可以用selenium做很多事情了,测试自动化,爬虫等等 但是我要写的脚本要在很多台电脑上运行,所以我要使用一个通用的脚本来支持在win7/win10上都可以运行,我要找到同时支持两个系统的浏览器内核 因为我打算写个自
阅读全文
摘要:学习内容 xpath,以及python字符串替换, url自适应拼接,因为很多网站的href不完整 使用Selenium 抓取动态页面内容 前言 这次要实现的是根据网址和xpath,去抓取同一页面中的所有公告内容 代码 源码 import requests from lxml import etre
阅读全文
摘要:前言 根据一个excel(xlsx)文件中的某一个格子颜色发生变化,发送定制的信息的邮件 奇怪的需求XD 因为那个excel的内容是实时变化的 最后的结果如下 代码 #!/usr/bin/python # -*- coding: UTF-8 -*- # 调用SMTP服务器 import smtpli
阅读全文
摘要:今天朋友问了我这么一个数学题目,反正是概率论的 我没玩过游戏王,所以按照他的想法写了以下代码,这份代码主要是用来计算收益的 顺便试了一下jupyterhub,共同编辑一份代码 效果如下 这个卡名的①②的效果1回合各能使用1次。 ①:自己主要阶段才能发动。这张卡从手卡特殊召唤,从自己手卡选1只怪兽送去
阅读全文
摘要:因为需要在单位用pycharm实在是太卡了,所以换成网页的编辑器 安装操作系统 本文使用的镜像:Ubuntu - Official Image | Docker Hub docker pull ubuntu:20.04 很小,下载一小会就结束了然后运行这个docker 这里开放的8888端口指的是一
阅读全文