Arxiv RAGによる論文サーベイの自動生成 | Shikoan's ML Blog

2024/04/27 54 users 自動生成 LLM Claude ＴＳＰ GPT

178{icon} {views} 複数のLLM（GPT/Claude3）とArxivの検索APIをRAGで統合し、論文サーベイの自動生成を作りました。検索結果の前処理や、サーベイ特有のプロンプトエンジニアリングやソートが重要で、最適化手法として古くからある巡回セールスマン問題（TSP）が有効に機能しました。また、生成部分ではGPTよりClaude3... 続きを読む

速報：話題の 1ビットLLMとは何か？｜寺田英雄（㈱オープンストリームCTO）

2024/03/02 175 users 1ビットLLM 速報 abs 話題 chapter

2024-02-27にarXiv公開され，昨日（2024-02-28）あたりから日本のAI・LLM界隈でも大きな話題になっている、マイクロソフトの研究チームが発表した 1ビットLLMであるが、これは、かつてB-DCGAN(https://link.springer.com/chapter/10.1007/978-3-030-36708-4_5; arXiv:https://arxiv.org/abs/1803.10930 )という「１ビッ... 続きを読む

Microsoftがたった13億のパラメーターでGPT-3.5超えのHumanEval50.6％をたたき出す「phi-1」を発表

2023/06/22 179 users パラメーター phi-1 Microsoft LLM 発表

LLaMaやFalconといった小型の大規模言語モデル(LLM)が矢継ぎ早にリリースされる中、Microsoft ResearchのAI研究チームが、プレプリントサーバーのarXivで、Transformerベースのモデル「phi-1」を発表しました。このモデルは、パラメーター数がGPT-3.5の100分の1以下の13億しかないにもかかわらず、テスト用データセット... 続きを読む

仮想の町に解き放たれた25人のAIエージェントはどう振る舞ったか

2023/04/16 117 users AIエージェント 仮想 ジェネレーティブ AIアバター 行動

仮想の町でAIアバターを観察した研究｢Generative Agents：Interactive Simulacra of Human Behavior（ジェネレーティブ・エージェント：人間の行動のインタラクティブな像）｣のスクリーンショット。 arXiv/Cornell University 研究者たちは、25人のAIアバターを仮想の町に放った。 アバターたちは、日々のスケジュールを... 続きを読む

社会人博士進学を検討するなら論文読もう - yumulog | 社会人博士の日記

2019/04/28 54 users yumulog ResearchGate 論文 進学 普及

過去の記事 社会人博士に進学しようとしている人へ - yumulog | 社会人博士の日記 にも似たようなことは書いてるんですが。 社会人博士での進学を検討しているなら、入学前にとりあえず論文読むのを習慣づけるのがお薦めです。arXivやResearchGateやオープンアクセス誌の普及もあって無料で読むことができるものが増えて... 続きを読む

AlphaZeroに投了宣言しないといけないかも知れない - コンピュータ将棋 Qhapaq

2018/12/07 63 users AlphaZero elmo 投了 定跡 イケ

AlphaZeroの論文が出てきました。arxivに出してた論文はイケてなかったですが今回のはイケてます。 前回の論文に対しては今の御時世でWCSC27のelmoに勝ったぐらいで convincingly defeat defeated a world champion program とか言わないでよとか、投了の基準が900点なの意味がわからんとか、定跡はどうしたのかとか、棋... 続きを読む

脳同士をつないで意思疎通できる「BrainNet」　ワシントン大学など開発 - ITmedia NEWS

2018/10/01 273 users TMS BCI 脳波 デバイス 米カーネギーメロン大学

米ワシントン大学と米カーネギーメロン大学の研究チームは9月23日、3人の脳をデバイスでつなぎ、直接意思疎通できるようにする「BrainNet」を、論文投稿サイト「arXiv」に発表した。 BrainNetの構造。2人の送信者の脳波をコンピュータが受け取り（Brain-Computer Interface, BCI）、コンピュータが受信者の脳へTMSを介し... 続きを読む

Hyper Collocation — arXiv に基づいた論文英語コロケーションデータベース

2018/02/15 79 users 例文 スニペット コンピュータサイエンス フレーズ 抽出

arXivの英語論文から入力された英単語やフレーズを検索し，前後に頻出する単語を集計するとともに使用箇所のスニペットを列挙するサービスです．Hyper Collocation とは？ arXiv に収録されている 811,761報 の 英語論文 から，入力された英単語やフレーズを検索し，前後に頻出する単語の集計と使用箇所からの例文の抽出を行うサービスです．数学・物理・コンピュータサイエンスの分野を... 続きを読む

2017年のディープラーニング論文100選 - Qiita

2017/12/18 391 users Qiita 富士通 富士通グループ 正式参加 正確性

これは Fujitsu Advent Calendar 2017 の18日目の記事です。 掲載内容は富士通グループを代表するものではありません。ただし、これまでの取り組みが評価されて、富士通がQiitaに正式参加することになりました [リンク] 。なお、内容の正確性には注意を払っていますが、無保証です。 はじめに この記事では今年発表されたディープラーニング論文（ArXivでの発表時期、発表された... 続きを読む

文書ベクトルをお手軽に高い精度で作れるSCDVって実際どうなのか日本語コーパスで実験した(EMNLP2017)

2017/11/12 97 users SDV コーパス 精度 日本語コーパス 前置き

前置きというか概要 今年のEMNLP2017で提案されていたSCDV(Sparse Composite Document Vectors)について、日本語のコーパス( )で検証しました。 SCDVのモチベーション ( https://dheeraj7596.github.io/SDV/ ) いい感じのランディングページまで用意していてすげえなって思いました。論文は当然のようにarxivで公開されて... 続きを読む

新規アプリケーションへの深層学習適用のベストプラクティス - Qiita

2017/04/26 117 users Papers Qiita FTP ベストプラクティス 論文

どのようにサービスにディープラーニングを適用すればいいか、ベストプラクティスがまとまっていた論文があったので、訳してみました。　　 元論文 Best Practices for Applying Deep Learning to Novel Applications Leslie N. Smith https://arxiv.org/ftp/arxiv/papers/1704/1704.01568... 続きを読む

太陽系外惑星で初めて火山噴火を発見か | ナショナルジオグラフィック日本版サイト

2015/05/08 77 users 火山噴火 太陽系外惑星 発見 Hurt 岩石

地球の8倍の質量を持ち、岩石からなる太陽系外惑星「かに座55番星e」の想像図。部分的に溶融した表面（左）と、火山活動が始まり、噴出したガスや塵により部分的に覆い隠されている様子（右）。（ILLUSTRATION BY NASA/JPL–CALTECH/R. HURT） 太陽系外惑星に関する最近の報告の中でも、今回、論文サーバー「arXiv」に投稿された論文は驚くべきものである。地球から40光年の彼... 続きを読む

ホーキング博士「ブラックホールは存在しない」 « WIRED.jp

2014/01/27 337 users ホーキング博士 WIRED.jp image ブラックホール

ブラックホールのイメージ。Image:NASA/Wikimedia Commons 著名な物理学者のスティーヴン・ホーキングは、『arXiv』に1月22日付けで公開した短い論文で、「（これまで考えられてきたような）ブラックホールは存在しない」と主張している。この現象は定義され直す必要があるのだと同氏はいう。 論文のタイトルは「Information Preservation and Weather... 続きを読む

光速超えのニュートリノ、原因は時計の同期にあり? | スラッシュドット・ジャパン サイエンス

2011/10/10 95 users ニュートリノ CERN Opera 光速 サイエンス

CERN (欧州原子核研究機構) が実験で計測したという光速超えのニュートリノについて、「光速を超えた」ように見えた原因は計測に使用した時計のシンクロにあるのではないかとする論文が発表された (arXiv:1109.6160v2、Nature News の記事、本家 /. 記事より) 。光速超えのニュートリノを計測したのは、OPERA (Oscillation Project with Emuls... 続きを読む

光速超えのニュートリノ、原因は時計の同期にあり? | スラッシュドット・ジャパン サイエンス

2011/10/10 95 users ニュートリノ CERN Opera capra 光速

capra 曰く、CERN (欧州原子核研究機構) が実験で計測したという光速超えのニュートリノについて、「光速を超えた」ように見えた原因は計測に使用した時計のシンクロにあるのではないかとする論文が発表された (arXiv:1109.6160v2、Nature News の記事、本家 /. 記事より) 。光速超えのニュートリノを計測したのは、OPERA (Oscillation Project w... 続きを読む

「宇宙の終わり」を再現する実験 « WIRED.jp 世界最強の「テクノ」ジャーナリズム

2011/08/03 89 users ジャーナリズム テクノ 実験 WIRED.jp 宇宙

メタマテリアルという素材を使って「ビッグバンの卓上モデル」を構築した研究チームが、今度は「ビッグクランチ」とも呼ばれる「時間の終焉」をシミュレーションする実験を行った。 レーザーで励起された後、メタマテリアルを通過するプラズモン。Images:Igor Smolyaninov/arXiv 宇宙は、爆発（Bang）ではなく「高調波発生」によって終わるようだ。 以前、メタマテリアルというエキゾチック物... 続きを読む