摘要:
qdrant是一个开源向量数据库,安装方法有多种,具体参考: https://github.com/qdrant/qdrant-client?tab=readme-ov-file#connect-to-qdrant-server https://qdrant.tech/documentation/i 阅读全文
摘要:
Transformer注意力架构原理 输入层 embedding词嵌入向量 将文本中词汇的数字表示转变为向量表示,在这样的高维空间捕捉词汇间的关系 语义相近的词语对应的向量位置也更相近 每个词先通过词典转换成tokenId,在把tokenId转化为一个512纬的向量 位置编码 将每个词的位置向量(通 阅读全文
摘要:
本案例通过Deep3DFaceRecon_pytorch实现 前置文档: https://github.com/sicxu/Deep3DFaceRecon_pytorch https://blog.csdn.net/flyfish1986/article/details/121861086 本文是在 阅读全文
摘要:
redis分布式锁的实现方式是: lock(){ sync(this){ //无法获取自旋 setnx(key,UUID) setex(60s) return UUID } } unlock(key,value){ sync(this){ if(get(key) == UUID){ del(key) 阅读全文
摘要:
maven依赖 spring-boot-starter-webmybatis-spring-boot-startermysql-connector-javalombok application.yml server: port: 8080 # 启动端口 spring: datasource: db1 阅读全文
摘要:
一些必须提前知道的概念 patition kafka日志文件是以patition在物理存储上分割的 是topic物理上的分组,一个topic可以分为多个partition,每个partition是一个有序的队列 是以文件夹的形式存储在具体Broker本机上 LEO 表示每个partition的log 阅读全文
摘要:
DCT全称为Discrete Cosine Transform,即离散余弦变换。DCT变换属于傅里叶变换的一种,常用于对信号和图像(包括图片和视频)进行数据压缩的基础。 在视频压缩历史上重要的发明之一就是DCT。没有DCT,后面的H.26X, JPEG等一系列压缩标准将无从谈起。 DCT有比较复杂的 阅读全文
摘要:
HDFS由namenode以及datanode两个角色组成 NameNode 作用 1、NameNode 负责整个分布式文件系统的元数据(MetaData)管理,也就是文件路径名、数据块的 ID 以及存储位置等信息2、接受DD上报的信息3、给DD分配任务(维护副本数) 元数据的存储文件方式:edit 阅读全文
摘要:
spark调度的几个概念 集群 一个spark集群可以同时运行多个spark应用 应用 1、main方法、spark-shell、spark-submit能够运行的spark程序 2、可以理解为创建SparkContext的driver运行的程序 3、一个spark应用可以运行多个job job j 阅读全文
摘要:
LSM-Tree简介 LSM Tree(Log Structure Merge Tree)是一种数据结构 从字面意思理解,是一种基于日志追加写、有一定结构、并且会merge合并的树(数据结构) 特点是: ①利用磁盘批量的顺序写要远比随机写性能高出很多来支持随机读写操作 ②更适用于写多读少类型的场景 阅读全文
摘要:
java排序的过程描述 1、N<47 插入排序 2、47<N<286 双轴快排 3、286<N 连续性好 归并排序(Timsort) 4、286<N 连续性不好 双轴快排 双轴快速排序是对普通快速排序的优化,普通快排是单轴的,即只选择一个分区点并进行划分,双轴快排是选择两个分区点,并把排序数组分为3 阅读全文
摘要:
之前写过一个linux安装centos7过程,感觉写的不太完善,现在更新一个新版本的 安装条件 centos7 rpm安装mysql 参考资料 https://blog.csdn.net/wudinaniya/article/details/81094578 https://www.cnblogs. 阅读全文
摘要:
使用说明 com.xxx包下加了@RestController注解的controller 打印的日志规格如下:包含:ip地址、url、全限定类名+方法名、请求时间、请求参数(支持多个)、响应时间、响应参数、响应时间(毫秒)、关键字、序列号(用于和响应打印匹配) # 请求打印 2020-12-22 1 阅读全文