日本語形態素解析の裏側を覗く！MeCab はどのように形態素解析しているか - クックパッド開発者ブログ

2016/05/11 1083 users Mecab 辞書 メジャー a_bicky 形態素解析

こんにちは、買物情報事業部の荒引 ( @a_bicky ) です。 前回、 「検索結果の疑問を解消するための検索の基礎」 で単語単位でインデキシングする前提で説明しましたが、今回は文などを単語単位で分割するために使う技術である形態素解析について触れます。 形態素解析器には色々ありますが、中でもメジャーと思われる MeCab の仕組みについて説明します。 MeCab の解析精度を上げるために辞書に単... 続きを読む

gitのdiff, status, logを極限までコンパクト化＋便利化する - Qiita [キータ]

2014/02/04 267 users キータ git diff 記号 Git Qiita

git diffを見やすくする git diff --color-words で差分を小さく表示する 通常のgit diffは行単位なので、例えば変数名を一括変更した場合見づらいです。 --color-wordsを指定すると記号やスペースで区切られた単語単位でのdiffを表示できます。gitの設定は不要です。 より細かな表示のカスタマイズも可能です。man git-diffで--word-diff... 続きを読む

PDFをPDFのまま差分チェック「DiffPDF」 - MOONGIFT|オープンソース・ソフトウェア紹介を軸としたITエンジニア、Webデザイナー向けブログ

2012/05/28 89 users MOONGIFT diff プログラマー PDF 相違点

プログラマーが開発中によく使うのがDiffです。行や単語単位で比較し、どこが違うか分かるので修正したり相違点をチェックしたりするのにとても便利です。そんなDiffをPDFでも使えるようにするのがDiffPDFです。 0 続きを読む

Taku Kudo - Google+ - 単語単位の係り受けの違和感 …

2012/02/29 29 users Taku Kudo Twitter 違和感 Google+

Taku Kudo さんは Google+ を使用しています。Google+ に参加して関心があるユーザーと交流してください。 単語単位の係り受けの違和感 以前に係り受けは文節単位か単語単位かの議論があったのですが、やはり単語単位の係り受けには違和感があります。そもそも、単語単位というのは正確ではなくて、形態素単位というべきです。Twitterでは話しきれないようなこともあるので、ここにまとめてお... 続きを読む