盘古分词-关键字搜索没有结果(关键字由未收录词组成)

由未收录词A、B、C等组成的任意组合在搜索时没有结果的问题。

解决方案很简单在设置中UnknownWordIdentify选项置为False就可以了。

下面是Pangu代码中处理段:

if (count == 0)
{
    if (_Options.UnknownWordIdentify)
    {
        WordInfo wi = new WordInfo();
        wi.Word = orginalText;
        wi.Position = 0;
        wi.WordType = WordType.None;
        wi.Rank = 1;
        result.AddFirst(wi);
        return result;
    }
    else
    {
        int position = 0;
        foreach (char c in orginalText)
        {
            WordInfo wi = new WordInfo();
            wi.Word = c.ToString();
            wi.Position = position++;
            wi.WordType = WordType.None;
            wi.Rank = 1;
            result.AddLast(wi);
        }

        return result;
    }
}

posted @   today4king  阅读(553)  评论(0编辑  收藏  举报
编辑推荐:
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
阅读排行:
· 10年+ .NET Coder 心语 ── 封装的思维:从隐藏、稳定开始理解其本质意义
· 地球OL攻略 —— 某应届生求职总结
· 提示词工程——AI应用必不可少的技术
· Open-Sora 2.0 重磅开源!
· 周边上新:园子的第一款马克杯温暖上架
点击右上角即可分享
微信分享提示
主题色彩