ベクトルデータの容量を96%削減するBinary Embedding

2024/05/21 55 users 容量

導入 こんにちは、株式会社ナレッジセンスの須藤英寿です。普段はエンジニアとして、LLMを使用したチャットのサービスを提供しており、とりわけRAGシステムの改善は日々の課題になっています。 RAGのシステムの中では、どんな情報にアクセスするかを決定する際に、Embeddingと呼ばれる文章をベクトル化する技術が使用さ... 続きを読む

LLMの普及で、ますます重要となるベクトルデータの活用　シチュエーション別「Pinecone」の3つのプラクティス

2023/08/21 11 users LLM プロンプティング OpenAI Pinecone 知見

「ChatGPT Meetup」は、プロンプティングからOpenAI API、さらには周辺のライブラリやHubのエコシステムまで広く活用の助けになる知見を共有し、みんなで手を動かして楽しむためのコミュニティです。1回目に登壇したのは、株式会社フィードフォースの八百俊哉氏。ベクトルデータベース「Pinecone」の概要とプラクティス... 続きを読む

SQLiteでベクトル検索ができる拡張sqlite-vssを試す｜mah_lab / 西見 公宏

2023/06/07 96 users SQLite mah_lab 西見 公宏 ベクトル検索 アプリ

SQLiteでベクトル検索を可能にするsqlite-vssそんなポータブルで便利なSQLiteですが、そのSQLiteでベクトル検索ができるとなるとより夢が広がります。 SQLite自体はファイルベースなので、あらかじめベクトルデータを設定したSQLiteデータベースファイルをアプリに組み込んで配布しても良いわけです。そうすればデータベ... 続きを読む

高次元ベクトルデータにおいて高速な近傍検索を実現するNGTの公開 - Yahoo! JAPAN Tech Blog

2015/09/30 76 users NGT Yahoo JAPAN Tech Blog 公開 一種

Yahoo! JAPAN研究所の岩崎です。 私は主に特定物体認識の研究開発を行っていますが、その一方で特定物体認識において必須技術である高次元ベクトルデータの近傍検索の研究開発も行っています。近傍検索の一種であるk最近傍検索とは、クエリとしてベクトルデータが与えられた時に、クエリと空間内に点在するベクトルデータとの距離に基づき近い順にk個のデータを検索する、ことです。kが5の場合の最近傍検索の例を... 続きを読む

英バース大学曰く、新技術によりピクセル形式のデータは5年以内に終わる | スラッシュドット・ジャパン IT

2012/12/14 21 users スラッシュドット・ジャパン 英バース大学 データ 新技術 本家

taraiok 曰く、過去50年間、動画や写真、ゲームのテクスチャまであらゆるデジタルメディアはピクセルデータで構成されてきた。しかし、英国のバース大学のJohn Patterson氏らの研究者のチームは、5年以内にすべてのデータがベクトルデータに変わると主張している（EXTREMETECH、バース大学リリース、PDFの技術資料、本家/.）。 ディスプレイの高解像度化が進んでいるが、解像度に合わせ... 続きを読む

クールなアクア風ボタンのベクトルデータが無料で72個！ | SiMPLE*SiMPLE

2007/02/12 244 users SiMPLE*SiMPLE イラストレーター 72個 無料

クールなアクア風ボタンのベクトルデータが無料で72個！ February 12, 2007 10:09 AM written by クールなアクア風ボタンのベクトルデータが無料で72個！ すぐに使えそうなアクア風ボタンのベクトルデータが無料で公開されています。イラストレーターなんかで編集すればぱっと使えそう。 » 72 Free Vector Glass Buttons and Bars ファイル... 続きを読む