08 2023 档案
摘要：模型训练代码：https://github.com/zhoujx4/NLP-Series-sentence-embeddings预训练macbert：https://github.com/ymcui/MacBERT 抱抱脸模型下载：https://huggingface.co/hfl/chinese
阅读全文
摘要：1、获取embedding向量 #macber链接https://github.com/ymcui/MacBERT from sklearn.manifold import TSNEfrom matplotlib import pyplot as pltfrom matplotlib.colors
阅读全文
摘要：一、jupyter进程查看 import json import os import os.path import posixpath import subprocess import numpy as np import pandas as pd import psutil import requ
阅读全文
摘要：一、背景 最近在进行asr部署方案的技术选型工作，主要对比了triton部署与paddle部署两种方案 triton方案链接：https://github.com/wenet-e2e/wenet/tree/main/runtime/gpu paddlespeech方案链接：https://githu
阅读全文
摘要：该文主要记录一下常用的python读取wav文件的常用三方库以及优缺点对比，以一段采样率16k，4.99秒单声道的测试语音为例子，音频文件读取后主要有以下几种形式 #格式一：列表 [-0.00015259 -0.00021362 -0.00021362 -0.00027466 -0.00015259
阅读全文
摘要：一、背景 有多台服务器都有部署jupyter notebook服务或者jupyter lab服务，可采用nginx进行配置，采用统一的入口，通过不同路由将请求分发到不同机器上 例如分别在10.10.10.10，10.10.10.11，10.10.10.12有部署jupyter服务，现在需要统一入口从
阅读全文
摘要：● 一、bert-as-service ● step1: 编译docker镜像需要的文件 ● step2: 编译镜像 ● step3: 启动容器服务命令 ● step4: 导出bert-as-service镜像分发部署 ● 参考 ● 二、torchServe部署bert-as-service ● 环
阅读全文
摘要：一、单节点线下测试 拉取镜像 1、 进入实验机器 go 10.10.10.10 2、 拉取es 7.16.2镜像 docker pull docker.elastic.co/elasticsearch/elasticsearch:7.16.2 安装ik分词器 1、 启动容器 docker run -
阅读全文
摘要：1 安装指定版本驱动和cuda 驱动版本网址：https://developer.nvidia.com/cuda-toolkit-archive下载cuda11.2，以我们服务器为例，进行勾选 得到下载命令 wget https://developer.download.nvidia.com/com
阅读全文
摘要：一，anaconda 与miniconda简介 Anaconda 是一个用于科学计算的 Python 发行版，支持 Linux, Mac, Windows, 包含了众多流行的科学计算、数据分析的 Python 包。 Miniconda是一个轻量级的conda安装，它是Anaconda的最小版本。Co
阅读全文
