2023年11月26日
摘要: 什么时候需要将计算放置在GPU,cuda上 计算量大的时候,有torch的时候 什么数据放在GPU 在 PyTorch 和其他深度学习框架中,通常只有模型的参数和输入到模型的数据(张量)需要被移动到 GPU 上 当从数据excel pandas中提取文本数据并通过分词器处理时,处理后的张量才需要被移 阅读全文
posted @ 2023-11-26 23:03 黑逍逍 阅读(40) 评论(0) 推荐(0) 编辑
摘要: 定义: nn.Transformer: 这是一个完整的Transformer模型,包含了编码器(Encoder)和解码器(Decoder)。这个类提供了将整个模型作为一个单一组件使用的接口。 nn.TransformerEncoder: 这是Transformer模型中编码器的部分。它由N个nn.T 阅读全文
posted @ 2023-11-26 22:39 黑逍逍 阅读(580) 评论(0) 推荐(0) 编辑
摘要: 列出目录中的文件和子目录 files_and_directories = os.listdir(directory_path) 要获取所有的文件,包括子目录下面的 os.walk for foldername, subfolders, filenames in os.walk('data'):当前文 阅读全文
posted @ 2023-11-26 18:16 黑逍逍 阅读(72) 评论(0) 推荐(0) 编辑
摘要: json格式 { "name": "John", "age": 30, "city": "New York"} json数组 [ "Google", "Runoob", "Taobao" ] { "name":"网站", "num":3, "sites":[ "Google", "Runoob", 阅读全文
posted @ 2023-11-26 18:02 黑逍逍 阅读(2) 评论(0) 推荐(0) 编辑