1、

可以過濾詞匯表中特定的字符串和單詞，完成大寫轉(zhuǎn)小寫的功能。

2、

根據(jù)空格和符號完成分詞，還可以完成對數(shù)字、字母、E-mail地址、IP地址和漢字的分析處理，還可以支持過濾詞匯來代替可以過濾的過濾功能實現(xiàn)。

3、

對西方字符進行基本詞法分析的分詞器。在處理詞匯單元時，使用非字母字符作為切分符號。分詞器不能過濾單詞，但可以分析和分割單詞。輸出詞法單元完成小寫字符轉(zhuǎn)換AvePreview(圖片瀏覽器)，去除標點符號等分隔符。

在全文檢索系統(tǒng)的開發(fā)中，通常用于支持西方符號的處理，但不支持中文。由于沒有完成詞過濾功能，所以不需要詞庫過濾支持。分詞策略簡單，使用非英文字符作為分隔符，不需要分詞詞典的支持。

4、

使用空格作為分隔符的分詞標記器。處理詞匯單元時，使用空格字符作為分隔符。分詞器不執(zhí)行詞法過濾或小寫字符轉(zhuǎn)換。

其實它可以用來支持特定環(huán)境下西方符號的處理。由于沒有完成詞過濾和小寫字符轉(zhuǎn)換功能PS國外花紋筆刷下載，所以不需要過濾詞庫支持。詞法切分策略只使用非英文字符作為分隔符關鍵詞分詞器綠色版，不需要分詞詞庫支持。

5、

將整個輸入視為單個詞匯單元，以便于對特定類型的文本進行索引和檢索。使用關鍵字分詞器為郵政編碼和地址等文本信息創(chuàng)建索引項非常方便。

6、

內(nèi)部調(diào)用分詞器對中文單詞進行分詞關鍵詞分詞器綠色版，通過完成過濾功能，可以實現(xiàn)中文的多分詞分詞和停用詞過濾。在 .0 版中已棄用。

7、

處理中文的功能與分析儀基本相同臺歷模板王免費版，分為單雙字節(jié)漢字。在 .0 版中已棄用。

8、 每個

per 主要用于不同的 的不同場合。例如，對于文件名，你需要使用它，對于文件內(nèi)容，你只能使用它。分類器可以通過 ( ) 添加。

9、

實現(xiàn)了基于字典的正反向全切分和正反向最大匹配分割兩種方法。是第三方實現(xiàn)的分詞器，繼承自的類，處理成中文文本。

10、JE-

JE-Yes 中文分詞組件，需要下載。

11、

中文分詞系統(tǒng)是在中科院張華平、劉群開發(fā)的基礎上完成的一個java開源分詞項目，簡化了原有分詞程序的復雜性，旨在提供一個比較好的中文分詞愛好者。學習機會。

12、 --

-- 智能詞典的智能中文分詞模塊。該算法基于隱馬爾可夫模型（Model，HMM）。它是對中科院計算所中文分詞程序（基于Java）的重新實現(xiàn)。可以直接搜索引擎提供簡體中文分詞支持。

13、

中文分詞效率高且可擴展。引入隱喻，完全面向?qū)ο蟮脑O計，先進的概念。它的效率比較高，在PIII 1G內(nèi)存的個人電腦上，1秒就能準確切分100萬個漢字。文章基于無限數(shù)量的詞典文件進行有效分割，實現(xiàn)詞匯的分類和定義。能夠合理地解析未知詞匯。

14、

使用 Chih-Hao Tsai 的 MMSeg 算法 ( ) 實現(xiàn)的中文分詞器，并實現(xiàn)了 's 和 solr's 以方便在和 Solr 中使用。 MMSeg 算法有兩種分詞方法：并且，都基于前向最大匹配。添加了四個規(guī)則來過度思考。官方表示：單詞正確識別率達到98.41%。兩種分詞算法都實現(xiàn)了。