相关性特征

词命中率:我们首先需要对query侧或item侧进行单边扩词,即同义词扩展。其中,同义词挖掘可使用word2Vec等方式,通过相似度分数截断及人工review后,得到一个同义词词典。之后将query/item(待排侧)扩词后的文本分别按照词粒度/字粒度进行切分,经过unigram/bigram/trigram组合后,计算两侧重合term/交叉产品词/交叉修饰词的数量,占query侧/item侧term总数量的比例。

反向词:反向词也是一类重要特征,我们需要维护一个反向词词典,训练时,检测query侧和item侧是否存在反向词。




posted @   15375357604  阅读(79)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· 震惊!C++程序真的从main开始吗?99%的程序员都答错了
· 【硬核科普】Trae如何「偷看」你的代码?零基础破解AI编程运行原理
· 单元测试从入门到精通
· 上周热点回顾(3.3-3.9)
· Vue3状态管理终极指南:Pinia保姆级教程
点击右上角即可分享
微信分享提示