このページの2つのバージョン間の差分を表示します。
両方とも前のリビジョン前のリビジョン次のリビジョン | 前のリビジョン | ||
形態素解析:sentencepiece [2021/06/20 10:38] – admin | 形態素解析:sentencepiece [2023/06/10 15:22] (現在) – admin | ||
---|---|---|---|
行 5: | 行 5: | ||
* 逆に言えば人間の感覚ではおかしな単語分割がされることもある。また学習テキストが変われば分割結果が変わる。 | * 逆に言えば人間の感覚ではおかしな単語分割がされることもある。また学習テキストが変われば分割結果が変わる。 | ||
* テキストの圧縮率をベースに最適化し、辞書規模を圧縮。 | * テキストの圧縮率をベースに最適化し、辞書規模を圧縮。 | ||
+ | * 2017-04-07 | [[https:// | ||
- | ==== リンク | + | ==== 記事 |
+ | * 2023-04-13 | [[https:// | ||
+ | * 2021-08-23 | [[https:// | ||
* 2021-06-08 | [[https:// | * 2021-06-08 | [[https:// | ||
* 2020-12-09 | [[https:// | * 2020-12-09 | [[https:// |