日本語形態素解析器のイメージ - 唯物是真 @Scaled_Wurm

2014/12/21 57 users Scaled_Wurm Mecab Juman 辞書 唯物是真

2014-12-21 日本語形態素解析器のイメージ 自然言語処理 前にこんなツイートをしたけどもうちょっとちゃんとメモっておく ゆるふわカジュアル勢()なので内容に間違ってる点があったら教えてくださると嬉しいです勝手なイメージだと、MeCab →一番使われてる 。速い。辞書を弄くるのが簡単。いろいろ移植されてる。Juman→出力が詳しい。代表表記に正規化できる。KNPを使うときはこれ。KyTea→... 続きを読む

LIBLINEARを用いた機械学習入門(単語分割)

2011/05/30 59 users Ruby 実装 プログラミング言語 単語分割 手順

このページでは機械学習のツール(LIBLINEAR)を利用して、実際に分類問題を解くにはどういう手順を経るかということについて解説します。つまり、Kytea(京都テキスト解析ツールキット)における簡易版の単語分割モデルを作ってみようということです。 なお今回はプログラミング言語としてRubyを用いますが、Rubyの知識がなくても実装ができるように解説するよう心がけます。また、必要以上に細かく書いて... 続きを読む