Elasticsearchのための新しい形態素解析器 「Sudachi」 - Qiita

2017/12/13 164 users Qiita elasticsearch Sudachi 要約

tl;dr （要約） Kuromojiに代わる新しい形態素解析器「 Sudachi 」 なにが良いの？ 最新の辞書 企業（ワークスアプリケーションズ）による継続的な更新 複数の分割単位 → 検索用途での再現率と適合率の向上 プラグインによる拡張 省メモリ Elasticsearchで使いたい プラグイン: WorksApplications/elasticsearch-sudachi 使い方は当記... 続きを読む

MeCab（形態素解析）をPythonから２分で使えるようにする手順

2017/08/01 99 users Mecab Pytho Jarファイル Java Python

Javaだと、Kuromojiを使用するまでに必要な手続きは、基本的にjarファイルを追加するだけで完了しますので、形態素解析を使うまでの敷居は高くありません。 しかし、PythonでMeCabを使おうとすると、セットアップに時間を取られてしまうことがあります。 ですので、今回は最小限の労力で、PythonからMeCabを使う方法を紹介致します。 使用した環境 Ubuntu 16.04 pytho... 続きを読む

Elasticsearch、Logstash、Kibana、Kuromojiでタグクラウドを作る - Taste of Tech Topics

2016/12/18 62 users logstash elasticsearch Kibana

2016 - 12 - 18 Elasticsearch、Logstash、Kibana、Kuromojiでタグクラウドを作る Elasticsearch Kibana Logstash list Tweet 突然ですが、我が家は2階にリビングがあるタイプの戸建てでして、天井が勾配していてカッコイイ感がすごいのですが、この季節は暖房の熱がどんどん登ってしまってなかなか部屋が暖まりません。 要するに... 続きを読む

Amazon Elasticsearch Serviceでkuromojiを使って日本語全文検索する ｜ Developers.IO

2015/10/02 52 users ナイス Developers.IO Amazon ES 最初

はじめに [新機能]Amazon Elasticsearch Serviceがリリースされました！でお伝えした通り、Amazon Elasticsearch Service(Amazon ES)はICU AnalysisとKuromojiをサポートしています。最初からKuromojiをサポートしているというのが本当にナイス。 そんなわけで、Amazon ESで、Kuromojiを使って日本語全文検... 続きを読む

kuromoji.js - Webブラウザ上で分かち書き！ MOONGIFT

2014/12/23 158 users Chasen 分かち書き MOONGIFT ソフトウェア 意味

テキストから意味を読み取るというのは非常に難しく、そのための専用ソフトウェアが存在するほどです。そしてテキスト解析手法の一つとして知られているのが分かち書きです。日本語であればChasenがよく知られています。 kuromoji.jsはそんな分かち書き処理をJavaScriptで行ってしまおうというソフトウェアになります。KuromojiというApache財団のオープンソース分かち書きエンジンをJ... 続きを読む

Pure Go な形態素解析器で実行バイナリに辞書埋め込んだヤツを作ってみた (1) - Qiita

2014/06/20 53 users Qiita 実行バイナリ 辞書 ヤツ 形態

はじめに DoubleArray を作ったこともあって，ついでに形態素解析器も作ってみようと思い立ち kuromoji を参考に形態素解析器を実装してみました．目標としては，Pure Go で kuromoji みたいな感じ（辞書内包，検索モードあり，スレッドセーフ）を目指します． 参考 下記を参考にさせていただきました． kuromoji 日本語入力を支える技術 Mecab 品詞IDの定義 形態... 続きを読む

Elasticsearchとkuromojiでちゃんとした日本語全文検索をやるメモ - elasticsearch | GMOメディア エンジニアブログ

2013/12/17 144 users elasticsearch 浅井 Java GMOメディア

Elasticsearchとkuromojiでちゃんとした日本語全文検索をやるメモ 技術推進室の浅井です。Elasticsearchで日本語全文検索をちゃんとやるための説明、日本語でちゃんと書かれているものが無くて少々困ったので、ちゃんと書いてみます。 Elasticsearchのインストール Ubuntu Debianパッケージがあります。これ入れれば良いのですが、その前にJavaが必要です。い... 続きを読む

Kuromojiで日本語全文検索 – AWSで始めるElasticSearch(1) ｜ Developers.IO

2013/10/31 124 users elasticsearch AWS 試行錯誤 ブロガー 何度

Kuromojiで日本語全文検索 – AWSで始めるElasticSearch(1) AWSで始めるElasticSearch AWS特集全文検索 はじめに 初めまして、ブロガーとして出張してきました@smokeymonkeyです。 今回、AWS上にElasticSearchを導入し、試行錯誤した結果をまとめてみました。シリーズものとして何度か続けていきたいと思いますので、どうぞ宜しくお願い致しま... 続きを読む

Clojure/kuromojiでテキストマイニング入門　～形態素解析からワードカウントまで～ - あんちべ！

2013/09/10 125 users テキストマイニング アンチ Clojure ワードカウント

2013-09-10 Clojure/kuromojiでテキストマイニング入門　～形態素解析からワードカウントまで～ [テキストマイニング] Clojureでテキストマイニングをしたい！という方がTLにいらっしゃったので、 Clojureという言語とkuromojiという形態素解析器を用いたテキストマイニング入門の記事を書きます。 この記事の通り手を動かすと、様々なテキスト、例えばアンケートの自由... 続きを読む

日本語形態素解析ライブラリ Kuromoji のコマンドライン用インターフェイスを書いた - ひだまりソケットは壊れない

2013/09/01 215 users ひだまりソケット perl インターフェイス Java 言語

2013-09-02 日本語形態素解析ライブラリ Kuromoji のコマンドライン用インターフェイスを書いた 形態素解析 Java で書かれた日本語形態素解析ライブラリ Kuromoji を Perl から使ってみたいなー、と思って、別の言語のプログラムから使いやすいようなインターフェイスを書きました。 Kuromoji について kuromoji - japanese morphologica... 続きを読む