fastTextで自然言語(日本語)の学習モデルを生成する手順まとめ

2019/04/11 21 users Facebook 足し算引き算 Wikipedia 言語 手順

Facebookが開発したfastTextを利用して自然言語(Wikipediaの日本語全記事)の機械学習モデルを生成するまでの手順を解説。また生成した学習モデルを使って類語抽出や単語ベクトルの足し算引き算等の演算テストを行う方法までコード付きで紹介します。 Pythonこの記事は約 分で読めます。（文字） fastTextで日本語を機械... 続きを読む

pythonでgensim+scikit-learnを使って文書分類してみた

2018/07/24 32 users Python 文書 件数 文書分類 自動分類

はじめに 文書分類をしたくなったが、fasttextによる自動分類が思ったように上手くいかなかった その理由は教師データの件数が少なかったかもしれないと考えた 少ない教師データでも上手くいく自動分類が欲しい 少し調べてみたら、gensim+scikit-learnでも分類できそうなので、そちらも試すことにした 前提 Windows 10 p... 続きを読む

fastTextの実装を見てみた

2017/05/29 53 users 株式会社ガイアックス プログラミング 実装 入社 懇親会

fastTextの実装を見てみた 1. fastTextの実装を見てみた 2017/02/04 自然言語処理LT会・懇親会＠新宿四谷 shirakiya831 2. Me 白木 義彦（shirakiya831） アディッシュ株式会社 技術開発部 大阪大学大学院で金属材料工学を学んだ後、 株式会社ガイアックスに入社。 プログラミングを始めて3年目、Webアプリに関わる技術は広く浅く…。 2016/5... 続きを読む

Facebookが公開した10億語を数分で学習するfastTextで一体何ができるのか

2016/08/28 162 users Facebook 一体何

続きを読む