SQLiteでLinderaを使った日本語全文検索 - *iroi*

2023/12/02 81 users SQLite iroi lindera

これは はてなエンジニアアドベントカレンダー2023 3日目の記事です。 はてなエンジニア Advent Calendar 2023 - Hatena Developer Blog はてなエンジニアのカレンダー | Advent Calendar 2023 - Qiita 昨日は id:pokutuna さんの blog.pokutuna.com でした。私も若い頃に同僚とGitHub上で白熱してしまい観光名所になっ... 続きを読む

オンラインドキュメントと日本語全文検索

2022/08/18 194 users オンラインドキュメント

自社では Sphinx というドキュメントツールを利用しているのですが、残念ながらこれに付属している検索機能の日本語検索はかなり厳しいです。また残念ながら Sphinx 開発側も検索周りを改善するという予定は直近ではないようです。 そして検索というのはとても難しい技術なため自分のような素人では簡単には導入して「普... 続きを読む

Ruby on Railsと素のPostgreSQLで日本語全文検索 - ククログ(2020-12-22)

2020/12/22 22 users PostgreSQL ククログ PGroonga 須藤 方法

PostgreSQLに超高速な日本語全文検索機能を追加するPGroongaを開発している須藤です。今回はPGroongaやpg_bigmなど拡張モジュールを使わずにPostgreSQLの組み込み機能だけで日本語全文検索を実現する方法を紹介します。PGroongaを使う方法はRuby on RailsでPostgreSQLとPGroongaを使って日本語全文検索を実現する方法を... 続きを読む

MySQLとPostgreSQLと日本語全文検索 - Groonga | Doorkeeper

2015/11/26 12 users Doorkeeper groonga RDBMS MySQL

概要 「MySQLとPostgreSQLと日本語全文検索」は次の2つのことについて紹介するイベントです。 MySQLで日本語全文検索する方法とその利用事例 PostgreSQLで日本語全文検索する方法とその利用事例 目的 このイベントの目的は参加者がOSSのRDBMSで日本語全文検索する方法を選択するとき、「参加者にとって」適切な選択をするための情報を提供することです。 言い換えると、イベントに参... 続きを読む

Elasticsearchとkuromojiでちゃんとした日本語全文検索をやるメモ - elasticsearch | GMOメディア エンジニアブログ

2013/12/17 144 users Kuromoji elasticsearch 浅井 Java

Elasticsearchとkuromojiでちゃんとした日本語全文検索をやるメモ 技術推進室の浅井です。Elasticsearchで日本語全文検索をちゃんとやるための説明、日本語でちゃんと書かれているものが無くて少々困ったので、ちゃんと書いてみます。 Elasticsearchのインストール Ubuntu Debianパッケージがあります。これ入れれば良いのですが、その前にJavaが必要です。い... 続きを読む

Kuromojiで日本語全文検索 – AWSで始めるElasticSearch(1) ｜ Developers.IO

2013/10/31 124 users elasticsearch Kuromoji AWS 何度

Kuromojiで日本語全文検索 – AWSで始めるElasticSearch(1) AWSで始めるElasticSearch AWS特集全文検索 はじめに 初めまして、ブロガーとして出張してきました@smokeymonkeyです。 今回、AWS上にElasticSearchを導入し、試行錯誤した結果をまとめてみました。シリーズものとして何度か続けていきたいと思いますので、どうぞ宜しくお願い致しま... 続きを読む

Perlで日本語全文検索できるCPANモジュール作りました - 俺とお前とlaysakura

2013/10/20 175 users laysakura CPANモジュール Mecab perl

2013-10-11 Perlで日本語全文検索できるCPANモジュール作りました Perlで全文検索を手軽にできるようにするCPANモジュール，Search::Fulltext をリリースしました． これ単品だと英語での全文検索ができるのですが，これまた拙作の Search::Fulltext::Tokenizer::MeCab と組み合わせて使うと 日本語全文検索 ができるようになります． ここ... 続きを読む

MySQL FULLTEXT + Ngram : LIKE検索より数十倍高速な、お手軽 日本語全文検索 について｜blog｜たたみラボ

2007/03/14 843 users Ngram ラボ Blog 数十倍

大変興味深くて判りやすい方法ですね。 あまりに判りやすかったので（？と言うか影響されて）、勢い、MySQL5.1+向けに同じようなn-gramによるFULLTEXTパーサーのプラグインを作ってしまいました。 http://mysqlbigram.googlepages.com/ これだと、わざわざ別フィールドにn-gramしたデータを入れなくても、MySQLの全文検索機能だけで同じような事ができま... 続きを読む