データサイエンス×演劇　〜トピックモデルによる舞台のジャンル・特徴分け　PART2〜｜Yu_Se｜note

2020/09/30 6 users Note part 舞台 ジャンル 考察

こんにちは、Yu_Seです。 さて、データサイエンス×演劇ということでデータサイエンスを使った舞台のジャンル・特徴分けを行った実験結果とその考察について、３部構成でまとめた記事のPART2です。 PART1で既に書いたように、ここからはトピックモデルに関する説明と、それを使った舞台のジャンル・特徴分けの結果につい... 続きを読む

トピックモデルを俯瞰して学ぶ - ひつじの〜と 備忘録

2019/12/20 19 users 備忘録 ひつじ Qiita 主眼 分野

本記事は，自然言語処理 Advent Calendar 2019 - Qiita です． はじめに 本記事ではトピックモデルと呼ばれるモデル・分野の中で最も有名なLatent Dirchlet Allocation, 通称LDA*1 とその周りのトピックモデルに関して,どんな資料があるのか？,どういった研究があるのか? といったことに主眼をおいてトピックモデルの研... 続きを読む

B'zの歌詞をPythonと機械学習で分析してみた 〜LDA編〜 - データサイエンティスト見習いの日常

2018/07/30 394 users Python B'z データサイエンティスト見習い 歌詞 日常

1. 本Part概要 前PartではB'zの歌詞を「TF-IDF」を用いた分析を行いました。 本Partではトピックモデルの一つである「LDA」を用いた分析についてお話しします。 pira-nino.hatenablog.com 2. LDAとは 2.1 LDAのイメージ 先に簡単な説明をしてしまいます。 LDAは「たくさんの文書データから単語のグルーピングを行う」モ... 続きを読む

グループドデータの非負値行列因子分解 - 廿TT

2018/07/04 29 users 廿TT ポアソン分布 gist.github.com 経路

モチベーション たとえばこういう表がある。 gist.github.com 表の左のほうにユーザー層の情報、右の方にユーザー層ごとのブログへのアクセス経路が書かれている。 どのユーザー層がどの経路を好むか知りたいとする。 そこでトピックモデルとしてポアソン分布を使った非負値行列因子分解を考える。 （トピックモデルシリ... 続きを読む

トピックモデル（LDA）で初学者に分かりづらいポイントについての解説 - Taste of Tech Topics

2017/12/11 24 users LdA qiita.com Tweet 数学 信号処理

2017 - 12 - 11 トピックモデル（LDA）で初学者に分かりづらいポイントについての解説 機械学習 Tweet こんにちは。 信号処理で使っていた数学の知識を生かして、 機械学習 関連の仕事をしている２年目の@ maron8676 です。 こちらは 機械学習 と数学 Advent Calendarの11日目の記事となります。 qiita.com トピックモデルの学習で初学者に分かりづらい... 続きを読む

【入門】トピックモデルとは？トピック分析の３つの手法を解説

2017/10/03 16 users 入門 手法 解説 3つ

１．あらすじ 人工知能ブームの昨今、人間の話し言葉や、書き言葉を機械に学習させ理解させたり、人間の思考的なものを人工知能技術を使用して実現させようという、NLP（自然言語処理）は未来を切り開く技術として大きな注目を集めており、人工知能の花形ということができるでしょう。 NLPの応用範囲は幅広く、近年、市場を賑わせているチャットボット等のような、対話システムに用いられたり、自動文章の生成や、文章理解... 続きを読む

トピックモデルで単語の分散表現 - 理論編 - scouty AI LAB

2017/08/07 31 users LAB deeplearning 単語 分散表現 島田

2017 - 08 - 07 トピックモデルで単語の分散表現 - 理論編 人工知能 技術者向け 知識表現(Knowledge Representation) 自然言語処理 こんにちは。代表の島田です。 最近はDeepLearningがホットなキーワードになっていますが、トピックモデルという 自然言語処理 における手法も、少し前に注目を集めました。聞いたことはあるけど何なのかわからない、という方のた... 続きを読む

トピックモデルの評価指標 Coherence 研究まとめ #トピ本

2016/01/28 23 users Perplexity 評価指標 既存研究 研究背景 基礎知識

トピックモデルの評価指標 Coherence 研究まとめ #トピ本 1. 【論論⽂文紹介】 　 トピックモデルの評価指標 Coherence  研究まとめ 2016/01/28 牧⼭山幸史 1 2. 発表の流流れ 1.  研究背景、基礎知識識 2.  既存研究の紹介(5つ) 3.  まとめ 2 3. 1.  研究背景、基礎知識識 •  トピックモデルの評価指標として Perplexity  と  ... 続きを読む

トピックモデルの評価指標 Coherence に関する論文まとめ - ほくそ笑む

2016/01/22 41 users LdA Perplexity トピック 指標 定義

LDA などのトピックモデルの評価指標として、Perplexity と Coherence の 2 つが広く使われています。 Perplexity はモデルの予測性能を測るための指標であり、Coherence は抽出されたトピックの品質を評価するための指標です。 トピックモデルは確率モデルであるため、Perplexity の定義は明確です。 一方、Coherence は「トピックが人間にとって分か... 続きを読む

LDA - 実況タイムラインとトピックモデルでプリキュアのエピソード間の類似度計算できるかな - Qiita

2015/12/20 13 users クラスタリング LdA Twitter Qiita プリキュア

本記事は プリキュアAdvent Calendar 2015 の18日目の記事です。なお本日は12/19ですがプリキュアを愛する皆さんなら海より広い心で許してくれるって私、信じてる！ Introduction あのアニメの、あの話とあの話の類似度が計算したい、あるいは類似する話同士でクラスタリングをしたい。そういう時どういう手段があるでしょうか。 一つの手法として、Twitterの実況タイムライン... 続きを読む

トピックモデルを用いた 潜在ファッション嗜好の推定

2015/11/11 51 users 推定 金田 専攻 大学院 データサイエンティスト

トピックモデルを用いた 潜在ファッション嗜好の推定 1. トピックモデルを用いた 潜在ファッション嗜好の推定 Fashion Tech Meetup #1 2015/11/10 Takashi Kaneda Ryosuke Goto 2. 自己紹介 金田 卓士 @kndt84 データサイエンティスト • 2009年に大学院を修了 専攻は計量経済学 • 一休.com、ソフトバンク・テクノロジーを 経... 続きを読む

制限付きボルツマンマシンの初心者向けガイド | コンピュータサイエンス | POSTD

2015/09/21 123 users POSTD RBM コンピュータサイエンス 回帰 復元

制限付きボルツマンマシン（RBM）は、次元削減、分類、回帰、協調フィルタリング、特徴学習、トピックモデルなどに役立ちます。制限付きボルツマンマシンは比較的シンプルなので、ニューラルネットワークを学ぶならここから取り組むのがよいでしょう。この記事では、制限付きボルツマンマシンがどのように機能するのかを解説していきます。目次 定義と構造 復元 確率分布 コードサンプル：Deeplearning4jを使... 続きを読む

Python - 【機械学習】Yahoo Newsの記事をMLlibのトピックモデル(LDA)でクラスタリングする。 - Qiita

2015/09/20 84 users LdA Qiita MLlib Spark qiita.com

Sparkシリーズ第３弾の記事です。MLlibのLDAを使ってYahoo Newsの記事をトピックモデル(LDA:Latent Dirichlet allocation)でクラスタリングしてみます。 第一弾 【機械学習】iPython NotebookでSparkを起動させてMLlibを試す http://qiita.com/kenmatsu4/items/00ad151e857d546a97c3... 続きを読む

『トピックモデルによる統計的潜在意味解析』読書会を開催中です | ALBERT Official Blog

2015/09/15 43 users 読書会 開催中 越水 トピック 単語

はじめまして。データ分析部の越水です。 本日は、弊社セミナールームで定期開催している 『トピックモデルによる統計的潜在意味解析』読書会について ご紹介したいと思います。 『トピックモデルによる統計的潜在意味解析』について トピックモデルとは、文書中の各単語およびそれらの単語が属するトピックが確率的に生成されていると仮定するモデルです。近年活発に研究が行われている分野であり、ニュースサイトでの記事の... 続きを読む

ディープラーニングだけがAIじゃない。トピックモデルの第一人者に聞く機械学習の未来 | TheWave

2015/05/25 247 users ニューロン TheWave シナプス 回路 第一人者

ディープラーニングは、人間の脳の中のニューロンとシナプスの回路をコンピューターの電子回路で真似て、それを何層にも重ねた手法。この手法が思いの外、成果を上げているので、人工知能に注目が集まっている。英誌エコノミストも最近の号で人工知能を特集するなど、ビジネスマンの間でも人工知能は今、ちょっとしたブームだ。 しかしディープラーニングのように人間の脳を模倣しなくても、コンピューターを賢くさせる手法はほか... 続きを読む

自然言語処理シリーズ トピックモデルによる統計的潜在意味解析｜コロナ社

2015/02/10 49 users コロナ社 本書 記号 背後 言語処理

大量のデータの背後にある潜在的な情報を抽出する技術として，トピックモデルと呼ばれる統計モデルの研究が近年注目を集めている。本書はこれについて，言語処理という具体的な問題に対して，その理論と応用をわかりやすく解説する。 0. 本書の使い方 　0.1　 本書の読み方 　0.2　 各章と付録の説明 　0.3　 本書で用いる記号など 1. 統計的潜在意味解析とは 　1.1 　潜在的意味・トピックと潜在的共... 続きを読む

Scala による自然言語処理

2013/09/01 105 users Scala 言語 ワークショップ 半年 質問応答

Scala による自然言語処理 Presentation Transcript Scala による自然言語処理 2013-09-01 Hiroyoshi Komatsu @torotoki 1 プロフィール • @torotoki • 興味 • 質問応答 • トピックモデル • 言語 • Scala 歴は半年くらい • NTCIR RITE という含意関係認識の ワークショップで触れた • 他の関... 続きを読む

小説家になろうのランキングをトピックモデルで解析(gensim) - 唯物是真 @Scaled_Wurm

2013/04/27 68 users Scaled_Wurm Python Skin プラン 累計

2013-04-27 小説家になろうのランキングをトピックモデルで解析(gensim) python 自然言語処理 小説家になろうというWeb小説投稿サイトがあります。 いわゆるライトノベル的な作品が多いのですが、近年書籍化される作品が多く出ていて注目を集めています。 続々と「小説家になろう」から書籍化作品が登場！ - フラン☆Skin はてな支店 小説を読もう！ || 小説ランキング[累計]の上... 続きを読む

第8回自然言語処理＠東京を開催しました #TokyoNLP - nokunoの日記

2011/11/23 19 users nokuno ATND TokyoNLP 言語処理 懇親会

はい，本日は勤労に感謝しつつ第8回自然言語処理＠東京を開催しました．場所はVOYAGE GROUP（旧ECナビ）で，懇親会もお世話になりました，@ajiyoshiさんいつもありがとうございます！第8回自然言語処理勉強会 #TokyoNLP : ATND トピックモデルとその周辺の話題 by @issei_sato さん Topic models with power-law using Pitma... 続きを読む