網友評分: 5分
Friso官方版是一款使用C語言開發的中文分詞器,使用了現在流行的mmseg算法,幫助用戶快速的實現中文分詞,提高工作效率。軟件完成基于模塊化設計和實現,可以很便捷的植入到其他程序中,滿足用戶的各種中文分詞功能需求。
1、中文分詞:mmseg算法 + Friso 獨創的優化算法,四種切分模式。
2、關鍵字提取:基于textRank算法。
3、關鍵短語提?。夯趖extRank算法。
4、關鍵句子提取:基于textRank算法。
1、簡易模式:FMM 算法,適合速度要求場合。
2、復雜模式- MMSEG 四種過濾算法,具有較高的岐義去除,分詞準確率達到了98.41%。
3、檢測模式:只返回詞庫中已有的詞條,很適合某些應用場合。(1.6.1版本開始)。
4、最多模式:細粒度切分,專為檢索而生,除了中文處理外(不具備中文的人名,數字識別等智能功能)其他與復雜模式一致(英文,組合詞等)。
1、同時支持對 UTF-8/GBK 編碼的切分,支持 php5 和 php7 擴展和 sphinx token 插件。
2、支持自定義詞庫。在 dict 文件夾下,可以隨便添加/刪除/更改詞庫和詞庫詞條,并且對詞庫進行了分類。
3、簡體/繁體/簡體混合支持, 可以方便的針對簡體,繁體或者簡繁體切分。同時還可以以此實現簡繁體的相互檢索。
4、支持中英/英中混合詞的識別(維護詞庫可以識別任何一種組合)。例如:卡拉ok, 漂亮mm, c語言,IC卡,哆啦a夢。
5、很好的英文支持,英文標點組合詞識別, 例如c++, c#, 電子郵件,網址,小數,百分數。
6、自定義保留標點:你可以自定義保留在切分結果中的標點,這樣可以識別出一些復雜的組合。
7、復雜英文切分的二次切分:默認 Friso 會保留數字和字母的原組合,開啟此功能,可以進行二次切分提高檢索的命中率。例如:qq2013會被切分成:qq/ 2013/ qq2013。
8、支持阿拉伯數字/小數基本單字單位的識別,例如2012年,1.75米,5噸,120斤,38.6℃。
9、自動英文圓角/半角,大寫/小寫轉換。
10、同義詞匹配:自動中文/英文同義詞追加. (需要在 friso.ini 中開啟 friso.add_syn 選項)。
11、自動中英文停止詞過濾。(需要在 friso.ini 中開啟 friso.clr_stw 選項)。
12、多配置支持, 安全的應用于多進程/多線程環境。