【LLM論文を読む】人間的なエピソード記憶を持つコンテキスト無限のLLM - ローカルLLM自由帳

2024/08/31 9 users 適時 後者 系統 論文 LLM

言語モデルの「記憶」を管理する方法としては、１）追加学習や知識編集によってLLM自体の知識更新を試みる方法と、２）外部の記憶データから必要情報を適時検索してモデルに渡す方法、の2つの方向性があります。 この論文は後者の系統に属する研究で、人間のエピソード記憶のあり方を参照し、外部データを効果的に整理・... 続きを読む

実務におけるRAG 〜学びと現場のノウハウ〜 | ドクセル

2024/07/22 9 users Rag Retrieval ドクセル generation

RAG (Retrieval-Augmented Generation)とは ● 外部データをRetrieval（検索）して ● プロンプトをAugument（拡張）し ● クエリに対する回答をGeneration（生成） ○ クエリ := ユーザからの問合せ ・・・する技術 ※本講義では「インプット＝クエリ＋プロンプト」と定義 4 RAG (Retrieval-Augmented Generation)とは 登場... 続きを読む

実務におけるRAG 〜学びと現場のノウハウ〜 | ドクセル

2024/07/22 156 users Rag Retrieval ドクセル generation

RAG (Retrieval-Augmented Generation)とは ● 外部データをRetrieval（検索）して ● プロンプトをAugument（拡張）し ● クエリに対する回答をGeneration（生成） ○ クエリ := ユーザからの問合せ ・・・する技術 ※本講義では「インプット＝クエリ＋プロンプト」と定義 4 RAG (Retrieval-Augmented Generation)とは 登場... 続きを読む

「社内のアレ分からん、教えてAI」を支援　Microsoftの“自社版ChatGPT作成サービス”、外部データ取り込み機能が正式リリース

2024/02/21 202 users アレ 正式リリース 機能 Rag 社内

米Microsoftは2月20日（現地時間）、大規模言語モデル「GPT-4」などのAPIを同社のクラウド上で使える「Azure OpenAI Service」の外部データ連携機能「On Your Data」を正式リリースした。これまではパブリックプレビュー版として提供していた。 On Your Dataはいわゆる「RAG」（大規模言語モデルに外部データベースの情... 続きを読む

LLM技術と外部データ活用による検索・回答精度向上手法（ファインチューニング、セマンティック検索、In-Context Learning、RAG）と著作権侵害｜知的財産・IT・人工知能・ベンチャービジネスの

2023/11/28 18 users LLM ファインチューニング Rag LLM技術 実装

第1　はじめに FAQシステムやチャットボットなど「何か知りたいこと（検索文・質問文）」を入力して検索や回答生成を行うに際して、検索や回答精度を向上させたり、回答根拠を明示させるために、LLM技術と外部データを組み合わせたシステムの研究開発や実装が急速に進んでいます。 LLMが外部データを参照できるようにす... 続きを読む

外部データをRetrievalしてLLM活用する上での課題と対策案 - ABEJA Tech Blog

2023/07/03 17 users ABEJA Tech Blog 課題 対策案 LLM 服部

はじめに ABEJAでデータサイエンティストをしている服部です。 今回はLLMで外部データを使うケースについてのお話をしたいと思います。 はじめに LLMと外部データの利用 RetrievalとLLM 0. (事前準備)参照したいテキストデータをDBに格納 1. ユーザの入力文とのテキスト類似度を計算して、関連テキストを抽出する(Retrie... 続きを読む

【Excel】Webページで公開されている表を使いたい！外部データをエクセルに取り込むテク - いまさら聞けないExcelの使い方講座 - 窓の杜

2020/03/22 14 users Excel エクセル テク Webページ 使い方講座

続きを読む

リターゲティング広告の効果アップにも活かせる！？DMPの概要と活用方法。 | nex8ブログ

2017/03/08 282 users DMP リターゲティング ターゲット 精度 バナー

外部データや自社データをかけあわせて活用する事で広告の精度を上げることができる「DMP」についてご紹介します。DMPの特徴、メリットやリターゲティングを例にしたDMPの活用例を説明しています。こんにちは。nex8事業部の小林です。 リターゲティング広告の費用対効果を良くするためには、配信するバナーやランディングページの改善、配信先の変更など様々な方法が考えられます。 配信するターゲットを変更するこ... 続きを読む

天気やSNSと連動したデジタルサイネージ広告「VISIONIA」--サイバーエージェントらが提供 - CNET Japan

2017/01/26 8 users サイバーエージェント 屋上 戎橋 ハチ公口 リアルタイム

サイバーエージェントは1月25日、関連会社のマイクロアドデジタルサイネージ、ヒットの2社と、天気やSNSなどの外部データと連動してリアルタイムに情報を配信するデジタルサイネージ広告「VISIONIA（ビジョニア）」の提供を開始した。 設置場所 は、JR東日本渋谷駅のハチ公口 スクランブル交差点脇／大外ビル（9階建て）屋上。また、3月には大阪・戎橋のツタヤエビスバシ ヒットビジョンにも導入予定。 V... 続きを読む

オタク心をくすぐる、Google アナリティクスと外部データを連携した分析とは？ | 一人でできるWebサイト収益UP術－ウェブ解析士事例集 | Web担当者Forum

2015/08/04 47 users Webサイト収益UP術－ウェブ解析士事例集 オタク心

Web担トップ » 編集記事一覧 » 一人でできるWebサイト収益UP術－ウェブ解析士事例集 » オタク心をくすぐる、Google アナリティクスと外部データを連携した分析とは？ 一人でできるWebサイト収益UP術－ウェブ解析士事例集 オタク心をくすぐる、Google アナリティクスと外部データを連携した分析とは？ Google AdWordsなどとGoogle アナリティクスを連携して、見える化... 続きを読む

PHP7のタイプヒントベストプラクティス | yohgaki's blog

2015/04/10 32 users yohgaki's blog PHP7 JSON 乖離 整数型

のPHP 7から基本的なデータ型（整数型、浮動小数点型、配列型）タイプヒントが追加されます。直感的に書くコードと正しいコードには乖離があります。PHP7でタイプヒントを使う場合のベストプラクティスを紹介します。 タイプヒントとタイプヒントの問題点については前回のブログを参照してください。 PHP7使用すべきタイプヒント PHPはWebシステムで利用され、データベースやJSONなどの外部データとのや... 続きを読む

iOSでこんなアプリ,こんな機能を作りたかったらこれを見ろ！作りたいアプリに対応するクラス、フレームワーク、ライブラリのまとめ！ - Qiita

2014/02/22 1314 users iOS Qiita ブッダ フレームワーク ライブラリ

画像を表示しようとしたら遅いよ！ 外部データを取ってきて表示するときにまずはまるのが画像の処理だと思います。非同期で必ず処理しましょう。 画像の非同期ロードはライブラリを使った方が早いと思います。 ヘッダーやフッタをつけたいよ！ tableView.tableHeaderView tableView.tableFooterView に突っ込む方法を書いてあるのが多いんですが、今回はもっと簡単な方法... 続きを読む

データ分析サービスのClearStory Dataはバックエンド技術とユーザ体験の二本の足を強化 | TechCrunch Japan

2013/10/31 9 users TechCrunch JAPAN インメモリデータベース

ClearStory Dataがローンチしたデータ分析サービスは、同社によれば、この世界初めての、コアなバックエンドサービスに、リッチなビジュアルと共有機能を組み合わせたサービスだ。 まずバックエンド技術の特徴は、同社のCEO Sharmila Shahani-Mulliganによれば、内部的データと外部データをインメモリデータベースの技術を利用して統合していることだ。データは、関係データベースの... 続きを読む

「いつソースを読むのか」

2013/03/31 61 users ソース DevTools フォーマット セキュリティ 程度

技術向上 複数人で読むか、アウトプットしながらがおすすめ ざっくり読む程度ではあまり効果がない 処理の流れを追いつつ、普段良く使い箇所を中心に読んでいく 公開してすぐのサービスはソースのフォーマット等に手が回ってなくて面白い 問題解析 問題解析ならスポットで必要なところだけ読む 基本的にはイベント中心にDevToolsで流れを追う セキュリティなら外部データを取得しているところを中心に読む 著名な... 続きを読む