https://www.jnlp.org/ https://www.jnlp.org/nlp/ 2026-04-29T07:24:39+00:00 https://www.jnlp.org/nlp/ https://www.jnlp.org/nlp/_media/logo.png text/html 2022-04-29T05:48:58+00:00 Anonymous (anonymous@undisclosed.example.com) https://www.jnlp.org/nlp/%E9%87%8D%E8%A6%81%E5%BA%A6/okapi_bm25?rev=1651211338&do=diff Okapi BM25 Okapi BM25とは * 文書中に含まれる単語の重要度を評価するアルゴリズム。 * 最初に実装されたシステムのOkapi情報検索システムにちなんでOkapi BM25と呼ばれる。 * BM25とはBest Match 25の略で、1994年に発表。情報検索システムOkapiで25番目に作られた。 text/html 2022-10-22T08:57:56+00:00 Anonymous (anonymous@undisclosed.example.com) https://www.jnlp.org/nlp/%E9%87%8D%E8%A6%81%E5%BA%A6/tf-idf?rev=1666429076&do=diff TF-IDF TF-IDFとは * term frequency - inverse document frequency * 文書中に含まれる単語の重要度を評価するアルゴリズム。文書のベクトル化など様々な用途に使われる。 * 単語の出現頻度(term frequency, TF)と逆文書頻度(Inverse document frequency, IDF)の積で定義。 text/html 2022-04-29T05:49:25+00:00 Anonymous (anonymous@undisclosed.example.com) https://www.jnlp.org/nlp/%E9%87%8D%E8%A6%81%E5%BA%A6/tf?rev=1651211365&do=diff TF 記事 * 2020-12-28 | 形態素解析の結果を利用してTF法により特徴抽出をする