shuntelligence Open v1
shunti IME の変換モデル 4 つと、mozc以外の外部依存をなくしたクリーン辞書を同梱しています。
M5,S9,XS6は誤字訂正、英字打ち分け等を覚えたshunti IME標準組み込みのモデル、PureXS2はXSのサイズで変換のみを覚えたモデルとなっています。
| ファイル | モデル | 大きさ | 1 位の正解率 (1052 問) |
|---|---|---|---|
shuntelligence-open-M5.bin
| M5 | 19.7 MB | 86.1% |
shuntelligence-open-S9.bin
| S9 | 8.3 MB | 85.6% |
shuntelligence-open-XS6.bin
| XS6 | 2.7 MB | 81.8% |
shuntelligence-open-PureXS2.bin
| PureXS2 | 2.7 MB | 82.7% |
shuntelligence-open-engine-v1.zip
| エンジン (C++ のソース・使い方の例・README・AI 向けの AGENTS.md) | 97 KB | |
kkc_lex_clean.bin・kkc_variants_clean.tsv
| クリーン辞書・表記ゆれの表 | 67 MB |
正解率はREADMEの比較と同じ1052問(左の文脈 20 字)を、クリーン辞書を利用し測ったものです。
使い方
同梱のエンジン (shuntelligence-open-engine-v1.zip。リポジトリの entry/src/main/cpp と同じもの) で、辞書とモデルを読み込んで使います。S9・M5・XS6 は英字打ち分けを mid2 という形で学習しているので、kkc_set_latin_mid2 を有効にしてください。Windows 版 shunti IME 0.8.2 で、設定の「辞書: クリーン」で同じ組み合わせで試用することができます。
ライセンス
変換モデルはMIT License。
エンジンもMIT License (zip の中の LICENSE)。
クリーン辞書はmozc由来の部分はBSD-3-Clause・IPAdicライセンス・パブリックドメイン(沖縄辞書)、それ以外の独自部分はMITです。
全文は LICENSE.txt にあります。