摘要:
Bert官方github地址:https://github.com/google-research/bert?tab=readme-ov-file 在github下载: 在huggingface(地址)下载config.json和pytorch_model.bin 将github下载的解压,并将hu 阅读全文
摘要:
计算机语言学家罗宾森总结了依存语法的四条定理: 1、一个句子中存在一个成分称之为根(root),这个成分不依赖于其它成分。 2、其它成分直接依存于某一成分; 3、任何一个成分都不能依存与两个或两个以上的成分; 4、如果A成分直接依存于B成分,而C成分在句中位于A和B之间,那么C或者直接依存于B,或者 阅读全文
摘要:
如果你被困在 Linux 终端,比如说在服务器上,如何从终端下载文件? 在 Linux 中是没有 download 命令的,但是有几个 Linux 命令可用于下载文件。 在这篇终端技巧中,你将学习两种在 Linux 中使用命令行下载文件的方法。 我在这里使用的是 Ubuntu,但除了安装,其余的命令 阅读全文
摘要:
在下载huggingface 模型的时候,经常会出现这个错误, HTTPSConnectionPool(host=‘huggingface.co’, port=443)。 如在下载Tokenizer的时候, tokenizer = AutoTokenizer.from_pretrained("cse 阅读全文
摘要:
问题描述 使用 conda activate 激活虚拟环境时报错: conda activate virtual_env 提示内容 CommandNotFoundError: Your shell has not been properly configured to use 'conda acti 阅读全文
摘要:
我们在阅读文章的时候,经常看到backbone head neck 这一类的术语,但是我们可能并不知道是什么意思,这篇文章就是对这些术语进行解释: backbone: 翻译为主干网络的意思,既然说是主干网络,就代表其是网络的一部分,那么是哪部分呢?这个主干网络大多时候指的是提取特征的网络,其作用就是 阅读全文
摘要:
引言 我下载的是2023年最新版本的pycharm,新版的 pycharm 安装好了之后就会出现一个问题,就是在配置 conda 虚拟环境找不到 conda 的可执行文件,出现了以下问题。 遇到这个问题有两种解决办法。 解决办法 1、第一种 按照以下步骤,找到condabin文件下面,conda.b 阅读全文
摘要:
皮肤 SimpleMemory 侧边栏公告Html <script type="text/javascript"> window.cnblogsConfig = { info: { name: '会自愈的哈士奇', // 用户名 startDate: 'yyy-mmm-ddd', // 入园时间,年 阅读全文
摘要:
使用 git clone 下载 Github 等网站的仓库时,可能会遇到类似 "Recv failure: Connection was reset" 或 "Failed to connect to http://github.com port 443 after 21114 ms: Couldn' 阅读全文
摘要:
与任何其他操作系统一样,Linux也支持丰富的图形用户界面 (GUI)。事实上,它支持多种图形桌面环境,例如 GNOME、KDE、Cinnamon 等等。 然而,大多数 Linux 管理员和高级用户更喜欢使用命令行界面,因为它允许我们使用脚本自动执行重复性任务。 这种方法的一个微不足道的缺点是,终端 阅读全文
摘要:
1.查看当前的版本: pip show xxx 2.降低 pip install -U transformers==4.33.0 -i https://pypi.tuna.tsinghua.edu.cn/simple 还有一种办法,比较暴力: 先卸载再安装,嘿嘿!!! pip uninstall n 阅读全文
摘要:
基础组件之Tokenizer Tokenizer简介 数据预处理 Step1 分词:使用分词器对文本数据进行分词(字、字词); Step2 构建词典:根据数据集分词的结果,构建词典映射(这一步并不绝对,如果采用预训练词向量,词典映射要根据词向量文件进行处理); Step3 数据转换:根据构建好的词典 阅读全文
摘要:
1.问题原因 报错信息: fatal: unable to access 'https://github.com/xxx/autowrite.git/': OpenSSL SSL_read: Connection was reset, errno 10054 又或者 fatal: unable to 阅读全文
摘要:
基础组件之Pipeline 什么是Pipeline Pipeline 将数据预处理、模型调用、结果后处理三部分组装成的流水线 使我们能够直接输入文本便获得最终的答案 数据进来先经过Tokenizer做数据预处理然后进到模型里面去做调用最后再去经过一个后处理得到结果 比如下面这句话转成id然后要经过模 阅读全文
摘要:
自然语言处理任务 首先介绍一下基础知识,这里我直接引用视频里的ppt Transformers介绍 Transformers相关环境安装 环境安装来了,这里作者从头演示了一次 前置环境安装——Python miniconda安装 下载地址:miniconda 如果C盘有空间,最好安装在C盘,且安装目 阅读全文