摘要: 最典型的是两个应用场景:全文检索 和 复杂查询。 正排索引,也叫正向索引(Forward Index),是通过文档ID去查找关键词(文档内容)。倒排索引,也叫反向索引(Inverted Index),是通过关键词查找文档ID。 must:其查询子句必须全部被满足,逻辑相当于 and ,并且会计算分数 阅读全文
posted @ 2023-08-22 15:24 15375357604 阅读(14) 评论(0) 推荐(0) 编辑
摘要: 大模型分词 阅读全文
posted @ 2023-08-22 14:02 15375357604 阅读(22) 评论(0) 推荐(0) 编辑
摘要: 在python中,I/O密集型任务可以用多线程的方式来实现(threading库);然而,对于计算密集型任务,由于python中全局锁GIL的存在,多线程并不能起到一个加速的作用。所以此时,一般使用多进程的方式实现(multiprocessing库)。 多线程 threading: 一个人有与异性聊 阅读全文
posted @ 2023-08-22 10:58 15375357604 阅读(14) 评论(0) 推荐(0) 编辑