自然言語処理の餅屋

https://www.jnlp.org/

ユーザ用ツール

サイト用ツール

現在位置: 自然言語処理の餅屋 » 形態素解析
形態素解析

差分

このページの2つのバージョン間の差分を表示します。

この比較画面へのリンク

両方とも前のリビジョン前のリビジョン
次のリビジョン		前のリビジョン
形態素解析 [2022/06/10 17:55] – admin形態素解析 [2023/06/12 16:57] (現在) – admin
行 10: 行 10:
  
 形態素解析は、文字通り言えば「形態素」に分解することだが、自然言語処理の「形態素」は日本語学とは異なる意味で使っているので注意（詳しくは長くなるので省略）。先人が語義を誤ってこうなったのかあえてこう呼んでいるのかは不明。 形態素解析は、文字通り言えば「形態素」に分解することだが、自然言語処理の「形態素」は日本語学とは異なる意味で使っているので注意（詳しくは長くなるので省略）。先人が語義を誤ってこうなったのかあえてこう呼んでいるのかは不明。
 +
 +[[形態素解析:仮名漢字変換]]は形態素解析と関係の深い技術。
  
 === 形態素解析器 === === 形態素解析器 ===
 以下では、[[形態素解析:単語分割]]を行う単語分割器（トークナイザ）も含めて紹介する。 以下では、[[形態素解析:単語分割]]を行う単語分割器（トークナイザ）も含めて紹介する。
  
-  * [[形態素解析:MeCab]]／[[形態素解析:Sudachi]]／[[形態素解析:chasen]]／[[形態素解析:juman]]／[[形態素解析:jumanpp|JUMAN++]]／[[形態素解析:kytea]]／[[形態素解析:kuromoji]]／[[形態素解析:janome]]／[[形態素解析:kagome]]／[[形態素解析:suika]]／[[形態素解析:lindera]]／[[形態素解析:taiyaki]]／[[形態素解析:yoin]]／[[形態素解析:igo]]／[[形態素解析:goya]]+  * [[形態素解析:MeCab]]／[[形態素解析:Sudachi]]／[[形態素解析:chasen]]／[[形態素解析:juman]]／[[形態素解析:jumanpp|JUMAN++]]／[[形態素解析:kytea]]／[[形態素解析:kuromoji]]／[[形態素解析:janome]]／[[形態素解析:kagome]]／[[形態素解析:suika]]／[[形態素解析:lindera]]／[[形態素解析:taiyaki]]／[[形態素解析:yoin]]／[[形態素解析:igo]]／[[形態素解析:goya]]／[[形態素解析:vibrato]]
   * （API）[[形態素解析:gooラボ形態素解析api]]   * （API）[[形態素解析:gooラボ形態素解析api]]
-  * 2022-04-18 | [[https://qiita.com/relu/items/689162a922936aa0896a|形態素解析器の比較アプリを作ってみた【NEologd】]] 
   * 2021-09-14 | [[https://srad.jp/~yasuoka/journal/649605/|yasuokaの日記： bert-base-japanese-uposとTokenClassificationPipelineでおこなう日本語形態素解析]]   * 2021-09-14 | [[https://srad.jp/~yasuoka/journal/649605/|yasuokaの日記： bert-base-japanese-uposとTokenClassificationPipelineでおこなう日本語形態素解析]]
-  * 2021-02-16 | [[https://qiita.com/gorilla_gorilla/items/8fcb257df384e161df75|spaCy vs. MeCab vs. UDPipe - Rで日本語形態素解析対決!]] 
-  * 2020-07-13 | [[http://tdual.hatenablog.com/entry/2020/07/13/162151|形態素解析器比較 Sudachi vs Mecab+Neologd]] 
-  * 2020-05-18 | [[https://qiita.com/hi-asano/items/aaf406db875f1c81530e|2019年末版 形態素解析器の比較]] 
   * 2015-08-07 | [[https://www.slideshare.net/JSUXDesign/2-51367666|ジャストシステムの形態素解析技術 その2 機械学習編]]   * 2015-08-07 | [[https://www.slideshare.net/JSUXDesign/2-51367666|ジャストシステムの形態素解析技術 その2 機械学習編]]
  
行 34: 行 32:
  
 === 形態素解析関連ツール === === 形態素解析関連ツール ===
-^Konoha|[[形態素解析:konoha]]|複数の形態素解析器を統一したコードで書くためのラッパー| +  * [[形態素解析:konoha|Konoha]] -- 複数の形態素解析器を統一したコードで書くためのラッパー 
-^morpheme-match|https://github.com/azu/morpheme-match|日本語を形態素解析したトークンを元に、文章にマッチするかを判定する|+  * [[https://github.com/azu/morpheme-match|morpheme-match]] -- 日本語を形態素解析したトークンを元に、文章にマッチするかを判定する 
 + 
 +=== 比較 === 
 +  * 2022-09-01 | [[https://phoneappli.hatenablog.com/entry/2022/09/01/181223|形態素解析器の違いで分かち書きに違いが出るのか実験してみた]] 
 +  * 2022-07-02 | [[https://www.nogawanogawa.com/entry/tokenizer|形態素解析器をいろいろ試す]] 
 +  * 2022-04-18 | [[https://qiita.com/relu/items/689162a922936aa0896a|形態素解析器の比較アプリを作ってみた【NEologd】]] 
 +  * 2021-02-16 | [[https://qiita.com/gorilla_gorilla/items/8fcb257df384e161df75|spaCy vs. MeCab vs. UDPipe - Rで日本語形態素解析対決!]] 
 +  * 2020-07-13 | [[http://tdual.hatenablog.com/entry/2020/07/13/162151|形態素解析器比較 Sudachi vs Mecab+Neologd]] 
 +  * 2020-05-18 | [[https://qiita.com/hi-asano/items/aaf406db875f1c81530e|2019年末版 形態素解析器の比較]]
  
 === 言語・環境 === === 言語・環境 ===
 +  * 2022-12-20 | [[https://github.com/paithiov909/capsuletower|capsuletower]] -- 日本語の形態素解析ができるShinyアプリ
   * 2022-05-20 | [[https://julialang.jp/2022/05/20/julia-morpher/|Juliaで形態素解析]]   * 2022-05-20 | [[https://julialang.jp/2022/05/20/julia-morpher/|Juliaで形態素解析]]
   * 2021-10-01 | [[https://qiita.com/sho-jp/items/50243956373f21b1e138|Rubyではじめる形態素解析]]   * 2021-10-01 | [[https://qiita.com/sho-jp/items/50243956373f21b1e138|Rubyではじめる形態素解析]]
行 43: 行 50:
   * 2014-12-09 | [[https://www.pahoo.org/e-soul/webtech/php06/php06-42-01.shtm|PHPで形態素解析を行う（gooラボ版）]]   * 2014-12-09 | [[https://www.pahoo.org/e-soul/webtech/php06/php06-42-01.shtm|PHPで形態素解析を行う（gooラボ版）]]
   * 2014-08-04 | [[http://shirayuca.github.io/blog/2014/08/04/yahoo.html|Googleスプレッドシート上で形態素解析]]   * 2014-08-04 | [[http://shirayuca.github.io/blog/2014/08/04/yahoo.html|Googleスプレッドシート上で形態素解析]]
 +
 +=== 可視化 ===
 +  * 2022-11-20 | [[https://qiita.com/mizunoyy/items/d152b8cde4f7997cb9a5|テキストを形態素解析して品詞ごとに色付けする]]
  
 === 記事 === === 記事 ===
 +  * 2023-04-10 | [[https://qiita.com/ryokan/items/167150759eaca504ad57|ChatGPTについて考える (3) 形態素解析はどこへ行った?]]
 +  * 2022-10-17 | [[https://speakerdeck.com/mosuka/the-importance-of-morphological-analysis-in-japanese-search-engines|The Importance of Morphological Analysis in Japanese Search Engines]]
   * 2022-03-25 | [[https://note.com/mierukaengine/n/n8e3e7a05e23e|【テキストマイニング研究室：第１回】 テキストマイニングの基礎技術 “形態素解析” とは？]]   * 2022-03-25 | [[https://note.com/mierukaengine/n/n8e3e7a05e23e|【テキストマイニング研究室：第１回】 テキストマイニングの基礎技術 “形態素解析” とは？]]
   * 2021-10-20 | [[https://qiita.com/tkosht/items/74822f3b2ed6e629d841|公開！週末研究ノート０３ ー 形態素解析と正答率、実行時間の関係]]   * 2021-10-20 | [[https://qiita.com/tkosht/items/74822f3b2ed6e629d841|公開！週末研究ノート０３ ー 形態素解析と正答率、実行時間の関係]]
行 64: 行 76:
   * 2018-02-27 | [[https://nikkie-ftnext.hatenablog.com/entry/2018/02/27/234950|イベントレポート | 実務で使う自然言語処理をする #サポーターズCoLab]] - [[:重要度]], [[:分類]]   * 2018-02-27 | [[https://nikkie-ftnext.hatenablog.com/entry/2018/02/27/234950|イベントレポート | 実務で使う自然言語処理をする #サポーターズCoLab]] - [[:重要度]], [[:分類]]
   * 2017-06-22 | (スライド) [[https://www.slideshare.net/WorksApplications/ss-78025845|形態素解析の話]] - [[企業:ワークスアプリケーションズ]]   * 2017-06-22 | (スライド) [[https://www.slideshare.net/WorksApplications/ss-78025845|形態素解析の話]] - [[企業:ワークスアプリケーションズ]]
 +  * 2016-06-21 | [[https://ledge.ai/morpho_analysis_japan/|形態素解析とは | 意味・用途・3種のツール・ライブラリを解説]]
   * 2011-10-19 | (スライド) [[https://www.slideshare.net/pfi/ss-9805912|形態素解析の過去・現在・未来]]   * 2011-10-19 | (スライド) [[https://www.slideshare.net/pfi/ss-9805912|形態素解析の過去・現在・未来]]
  
(感想・要望・情報提供)　
.gz · 最終更新: 2022/06/10 17:55 by admin

ページ用ツール

(広告募集)