Abnormally Distributed

統計解析担当のライフサイエンス研究者 -> データサイエンティスト@コンサル

ベイジアンモデリング

LDAによるトピックモデル ②gensimによる実装

前回の記事ではLDAの概要や関連手法、確率モデルについて書いた。 今回はPythonのgensimというライブラリを用いて、LDAを実践してみる。 その前に、前回触れていなかったトピックモデルの評価方法について説明する。 評価指標 LDAは教師なしモデルであり、精…

LDAによるトピックモデル ①概要と確率モデル

トピックモデルはテキストデータの潜在的意味の解析に用いられる統計モデルの総称である。 ここでは一番有名なモデルである、Latent Dirichlet Allocation (LDA)について説明する。 LDAとは 文書データをLDAで処理することで、文書のトピックの分類や、トピ…

「基礎からのベイズ統計学」の例を実装しながら理解する(①MH法まで)

「基礎からのベイズ統計学」で紹介された例をPythonで実装してみる。この記事は基本的には備忘録であり、書籍で詳しく解説してある部分は省略し、ポイントと実装して確認した結果のみ記載する。基礎からのベイズ統計学: ハミルトニアンモンテカルロ法による…