このページの2つのバージョン間の差分を表示します。
両方とも前のリビジョン前のリビジョン次のリビジョン | 前のリビジョン最新のリビジョン両方とも次のリビジョン | ||
形態素解析:sentencepiece [2021/02/07 15:31] – ↷ sentencepiece から 形態素解析:sentencepiece へページを移動しました。 admin | 形態素解析:sentencepiece [2022/09/14 21:24] – admin | ||
---|---|---|---|
行 5: | 行 5: | ||
* 逆に言えば人間の感覚ではおかしな単語分割がされることもある。また学習テキストが変われば分割結果が変わる。 | * 逆に言えば人間の感覚ではおかしな単語分割がされることもある。また学習テキストが変われば分割結果が変わる。 | ||
* テキストの圧縮率をベースに最適化し、辞書規模を圧縮。 | * テキストの圧縮率をベースに最適化し、辞書規模を圧縮。 | ||
+ | * 2017-04-07 | [[https:// | ||
- | ==== リンク | + | ==== 記事 |
+ | * 2021-08-23 | [[https:// | ||
+ | * 2021-06-08 | [[https:// | ||
* 2020-12-09 | [[https:// | * 2020-12-09 | [[https:// | ||
* 2020-05-14 | [[https:// | * 2020-05-14 | [[https:// | ||