プログラム lace.sf.net

LACE は、CJK (中国語/日本語/韓国語) と英語とクォートの "ルツェン アナライザーを意味します。これは、英語とCJKの混合テキストを処理できるシンプルなトークナイザーです。中国語の単語は辞書ベースのメソッドを使用して処理されます。