===== Word2Vec ===== === Word2Vecとは === * 最も有名な単語の[[:分散表現]]。[[:教師なし学習]]で単語をベクトル化する * 中間層が一層の[[:ニューラルネットワーク]] * [[:cbow]]と[[:skip-gram]]という２種類のモデルがある * 意味の近い単語が近いベクトルになるだけでなく、ベクトルの加減算ができる。例えば、東京－日本＋イタリアはローマ（に近い単語ベクトル）が出力される。ただ実際にいろいろやってみるとそううまくはいかない場合も多い。 * [[:類似度]]も参照。 === モデルの公開 === * [[http://www.cl.ecei.tohoku.ac.jp/~m-suzuki/jawiki_vector/|日本語 Wikipedia エンティティベクトル]] * [[https://aial.shiroyagi.co.jp/2017/02/japanese-word2vec-model-builder/|word2vecの学習済み日本語モデルを公開します]] * [[https://cl.asahi.com/api_data/wordembedding.html|朝日新聞単語ベクトル]] === やってみた === * 2022-11-22 | [[https://qiita.com/fY9pFc4W1I8uoa0/items/a5e3b7706b8e8f68fabc|自然言語処理ハンズオン【MeCab, word2vec】文章から食材を自動抽出]] * 2022-06-27 | [[https://note.com/cograph_data/n/nd5dd98d960e2|自然言語処理ハンズオン【MeCab, word2vec】動かしてみよう！]] * 2020-01-20 | [[https://qiita.com/DancingEnginee1/items/b10c8ef7893d99aa53be|【機械学習】Word2Vecで単語間の類似度を測定する]] * 2018-12-19 | [[https://qiita.com/koh_hei128/items/2c7858ada50662bca3dd|秋元康に「恋」とは何かを聞いてみた]] === 高速化 === * 2023-06-19 | [[https://techmath-project.com/2023/06/19/seminar3-4/|word2vec の高速化]] === 記事 === * 2023-03-22 | [[https://zenn.dev/yosuke00/articles/94817701b20059|Stanford NLP with Deep Learning Lecture2のまとめ]] * 2023-03-08 | [[https://zenn.dev/yosuke00/articles/4084a7b691ff92|Stanford NLP with Deep Learning Lecture1のまとめ]] * 2022-12-22 | [[https://www.youtube.com/watch?v=p67IYB7k9k8|自然言語処理における負例サンプリング損失の利用と発展]] * 2022-12-14 | [[https://blog.kikagaku.co.jp/word2vec|自然言語処理の必須知識！Word2Vec とは？]] * 2022-09-27 | [[https://qiita.com/masakuri/items/480c093953dc9dd7f54b|【非専門家向け】word2vec - chiVe / chiTra 利活用に向けて Part2.]] * 2022-01-07 | (動画) [[https://www.youtube.com/watch?v=_9fyK_odwyQ|【Deep Learning研修（発展）】系列データモデリング (RNN / LSTM / Transformer)　第９回「word2vec、ELMo」]] * 2021-07-26 | [[https://qiita.com/ryouryou_34/items/f2e0a5b83ac0ee839b5a|word2vecを簡単に試してみる]] * 2021-05-24 | [[https://qiita.com/mizutokage/items/24343a9db3638195fcb6|Word2Vecでコーパスの学習をしてみる]] * 2021-04-29 | [[https://omathin.com/2021/04/29/word2vec-python/|【自然言語処理】Google Colaboratoryでword2vecを実装してみよう！]] * 2021-04-22 | [[https://aidemy.net/magazine/1637/|自然言語処理で、Twitterユーザーに『鬼滅の刃』の「鬼」とは何か聞いてみた]] * 2021-04-08 | [[https://ainow.ai/2021/04/08/254071/|Word2vecとは｜モデルの種類やその仕組み、活用事例まで紹介！]] * 2021-01-28 | (動画) [[https://www.youtube.com/watch?v=t5f0LG7lGo0|Word2vec、それは自然言語処理の基本【ゆっくり解説/Pythonプログラミング入門】]] * 2020-12-28 | [[https://naoki-is.me/archives/494|【自然言語処理】単語の意味を計算できる「Word2Vec」を噛み砕いて説明してみた]] * 2020-12-25 | [[https://yu-nix.com/blog/2020/12/25/python-word2vec-man-shame/|Word2Vecで「男」から「恥」を引くとどうなるか【Python, 自然言語処理】]] * 2020-10-05 | [[https://yu-nix.com/blog/2020/10/5/python-gensim-word2vec/|PythonでWord2vecを使い類似語を表示するスクリプトを作った【自然言語処理, gensim】]] * 2020-09-28 | [[https://qiita.com//fumitoshi/items/ca5eef61c8f8b9729a12|形態素解析と単語のベクトル化してみた]] * 2020-06-28 | (動画) [[https://www.youtube.com/watch?v=FoY1rRH2Jc4|【自然言語処理】Word2Vecって何？【素人でも分かるように超解説】]] * 2020-03-12 | [[https://ledge.ai/word2vec/|Word2Vecとは | 分散表現・Skip-gram法とCBOWの仕組み・ツールや活用事例まで徹底解説]] * 2019-03-27 | [[https://jalammar.github.io/illustrated-word2vec/|The Illustrated Word2vec]] * 2019-02-01 | (動画) [[https://www.youtube.com/watch?v=v5HarcIrxlM|【レクチャー: word2vecの概要】自然言語処理とチャットボット: AIによる文章生成と会話エンジン開発]] * 2019-01-09 | [[https://www.takapy.work/entry/2019/01/09/080338|単語と図で理解する自然言語処理（word2vec, RNN, LSTM）後編]] * 2018-06-18 | [[https://takoroy-ai.hatenadiary.jp/entry/2018/06/18/214810|Word2Vecと多義性]] * 2017-11-20 | [[https://qiita.com/yoppe/items/512c7c072d08c64afa7e|Word2Vecを使った文章間の類似度算出（簡易版）]] * 2016-12-20 | [[https://qiita.com/naotaka1128/items/2c4551abfd40e43b0146|【転職会議】クチコミをword2vecで自然言語処理して会社を分類してみる]] * 2014-12-31 | [[http://shanti2013.blogspot.com/2014/12/word2vec-2014.html|word2vec の2014総括]]