07 2020 档案
摘要:1.学习率 (learning rate) 学习率 (learning rate),控制模型的学习进度 : 学习率(Learning Rate,常用η表示。)是一个超参数,考虑到损失梯度,它控制着我们在多大程度上调整网络的权重。值越低,沿着向下的斜率就越慢。虽然这可能是一个好主意(使用低学习率),以
阅读全文
摘要:1.优化器算法简述 首先来看一下梯度下降最常见的三种变形 BGD,SGD,MBGD,这三种形式的区别就是取决于我们用多少数据来计算目标函数的梯度,这样的话自然就涉及到一个 trade-off,即参数更新的准确率和运行时间。 2.Batch Gradient Descent (BGD) 梯度更新规则:
阅读全文
摘要:1.dict简介 字典是另一种可变容器模型,且可存储任意类型对象。 字典的每个键值 key=>value 对用冒号 : 分割,每个键值对之间用逗号 , 分割,整个字典包括在花括号 {} 中 ,格式如下所示: d = {key1 : value1, key2 : value2 } 键必须是唯一的,但值
阅读全文
摘要:1.列表list拼接成字符串 Python join() 方法用于将序列(列表是序列的一种)中的元素以指定的字符连接生成一个新的字符串。 item1 = ["lowman", "isbusy"] item2 = ",".join(item1) # 根据实际需要使用相应的分隔符连接列表元素,如 , :
阅读全文
摘要:1.nn.Module类理解 pytorch里面一切自定义操作基本上都是继承nn.Module类来实现的 方法预览: class Module(object): def __init__(self): def forward(self, *input): def add_module(self, n
阅读全文
摘要:1.类和对象的基本概念 面向对象的思想中提出了两个概念,即类和对象。类是对某一类事物的抽象描述,是一种抽象的数据类型,一种模板。而对象用于表示现实中该类事物的个体,也就是具体化了类的描述。它们的关系是,对象是类的具体实例,类是对象的模板。对象根据类创建,一个类可以创建多个对象。比如我定义了一个学生类
阅读全文
摘要:1.word Embedding的概念理解 首先,我们先理解一下什么是Embedding。Word Embedding翻译过来的意思就是词嵌入,通俗来讲就是将文字转换为一串数字。因为数字是计算机更容易识别的一种表达形式。我们词嵌入的过程,就相当于是我们在给计算机制造出一本字典的过程。计算机可以通过这
阅读全文
摘要:1.为什么要用pack_padded_sequence在使用深度学习特别是RNN(LSTM/GRU)进行序列分析时,经常会遇到序列长度不一样的情况,此时就需要对同一个batch中的不同序列使用padding的方式进行序列长度对齐(可以都填充为batch中最长序列的长度,也可以设置一个统一的长度,对所
阅读全文
摘要:1.Pytorch中的LSTM模型参数说明 class torch.nn.LSTM(*args, **kwargs) Pytorch官方文档中参数说明: Args: input_size: The number of expected features in the input `x` hidden
阅读全文
摘要:1.循环神经网络 A是一组神经网络(可以理解为一个网络的自循环),它的工作是不停的接收并且输出。从图中可以看出A允许将信息不停的再内部循环,这样使得它可以保证每一步的计算都保存以前的信息
阅读全文
摘要:C:\Program Files (x86)\Thunder Network\Xmp\profiles\Subtitle\Query\3058B8C096237AEC24F97458FB18AB6DE0A3740F
阅读全文
摘要:在这个速查手册中,我们使用如下缩写: df:任意的Pandas DataFrame对象 s:任意的Pandas Series对象 raw:行标签 col:列标签 导入依赖包: import pandas as pd import numpy as np 1.导入数据 pd.read_csv(file
阅读全文
摘要:1.df.loc[[index],[colunm]] 通过标签选择数据 loc需要两个单/列表/范围运算符,用","分隔。第一个表示行,第二个表示列 (1)获取指定列的数据 df.loc[:,'reviews'] 注意: 第一个参数为:表示所有行,第2个参数为列名,设置获取review列的数据 im
阅读全文
摘要:1.Python中以绝对路径或者相对路径导入文件的方法 绝对路径就是文件的真正存在的路径,是指从硬盘的根目录(盘符)开始,进行一级级目录指向文件。相对路径就是以当前文件为基准进行一级级目录指向被引用的资源文件。以下是常用的表示当前目录和当前目录的父级目录的标识符 ../ 表示当前文件所在的目录的上一
阅读全文