「Bluesky運営元はユーザーの投稿をAI学習に使わないが第三者はAI学習できてしまう」という実例が登場、BlueskyのAPI経由で100万投稿分のデータセットがHugging Faceで公開されてしまう

2024/11/28 22 users Bluesky 旧twitter 実例 api経由 明文化

2024年11月に利用規約を更新したX(旧Twitter)では、投稿をAI学習に利用することを明文化しました。これを受けて、多くのユーザーが「投稿をAIのトレーニングに利用することはない」と表明している競合SNSのBlueskyに移行しています。しかし、BlueskyのAPI経由で入手した100万投稿分のデータセットがHugging Face上で公開... 続きを読む

BlueskyのAPI経由で取得のユーザーデータが公開される　「システム外で強制はできない」

2024/11/27 68 users Bluesky ダニエル 米Bluesky api経由 ホスト

米Blueskyは「ユーザーデータをAIのトレーニングに使わない」と宣言したが、約1万件の同SNSへのポストが11月26日（現地時間）、米Hugging Face上で公開された（その後、削除された）。 公開したのはHugging Faceのエンジニア、ダニエル・ファン・ストリアン氏。Blueskyのアカウントで、機械学習に最適な1万件の公開ポス... 続きを読む

Hugging Faceでダウンロード可能なAIモデルの数が100万個を突破

2024/09/28 8 users 突破 AIモデル ダウンロード Meta Llama

AIプラットフォームのHugging Faceでは、Metaの「Llama」やGoogleの「Gemma 2」など、数多くのAIモデルが公開されています。そんなHugging Faceでダウンロード可能になったAIモデルの数が2024年9月をもって100万個を突破したことが報告されています。 1M Models on @huggingface Hub ???? Models are going exponential ... 続きを読む

Google、AIの“幻覚”に対処する「DataGemma」をオープンモデルでリリース

2024/09/15 18 users 幻覚 LLM GEMINI Gemma ハルシネーション

米Googleは9月13日（現地時間）、LLMが不正確な回答を出してしまういわゆる幻覚（ハルシネーション）を軽減するためのAIモデル「DataGemma」を発表した。オープンモデルとしてHugging Faceで公開した。 Gemmaは、Googleが今年2月にオープンモデルとして発表した「Gemini」の軽量版LLM。DataGemmaは、このGemmaのオープン... 続きを読む

Mozilla/whisperfile · Hugging Face

2024/08/26 13 users Mozilla

OpenAI Whisper - llamafile Whisperfile is a high-performance implementation of OpenAI's Whisper created by Mozilla Ocho as part of the llamafile project, based on the whisper.cpp software written by Georgi Gerganov, et al. Model creator: OpenAI Original models: openai/whisper-release Origin of qu... 続きを読む

Sakana AI、複数の画像を扱える“日本語視覚言語モデル”公開　非英語圏での先駆けに

2024/08/05 13 users Sakana AI 非英語圏 複数 画像 公開

AIスタートアップのSakana AI（東京都港区）は8月2日、複数の画像について日本語で質疑応答できるAIモデル「Llama-3-EvoVLM-JP-v2」を発表した。このモデルは、同社が提案する生成AIの開発手法「進化的モデルマージ」で開発した視覚言語モデル（VLM）。作成したAIモデルなどはHugging Faceで公開中。 「Llama-3-EvoVLM-J... 続きを読む

Sakana.ai、浮世絵風イラスト生成AIを公開　浮世絵をカラー化するAIも

2024/07/22 27 users Sakana.ai 錦絵 Evo-Ukiyoe 浮世絵 デモ

元米Googleの著名な研究者、リオン・ジョーンズ氏とデビッド・ハー氏らが東京で立ち上げたAIスタートアップSakana.ai（東京都港区）は7月21日、浮世絵風イラストを生成できるAIモデル「Evo-Ukiyoe」と、浮世絵をカラー化できるモデル「Evo-Nishikie」（錦絵）を発表した。各モデルとそのデモをHugging Faceで公開してい... 続きを読む

Meta、コード最適化のためのAIモデル「LLM Compiler」を商用ライセンスで公開

2024/06/28 13 users LLMモデル 米Meta Meta コード 以下

米Metaは6月27日（現地時間）、コード最適化のためのLLMモデル「Meta Large Language Model Compiler」（以下「LLM Compiler」）を発表した。特別な商用ライセンスの下でリリースしており、Hugging Faceでダウンロードできる。70億パラメータと130億パラメータの2サイズ構成だ。 LLM Compilerは、研究者や開発者がコード... 続きを読む

Apple、iPhoneでも稼働するオープンな言語モデル「OpenELM」を公開

2024/04/25 16 users iPhone OpenELM ELM Apple パラメータ

米Appleの研究者らは4月24日（現地時間）、オープンソースの言語モデル「OpenELM」（ELMはEfficient Language Model、効率的な言語モデルの略）をHugging Faceで公開した。 パラメータ数の異なる4つのモデルがある。小さいものから、2億7000万、4億5000万、11億、30億（パラメータとは、意思決定でモデルがトレーニング... 続きを読む

Meta、無料で商用可の新LLM「Llama 3」、ほぼすべてのクラウドでアクセス可能に

2024/04/19 29 users Meta LLM Kaggle Snowflake クラウド

米Metaは4月18日（現地時間）、オープンソースのLLMの最新版「Llama 3」を発表した。80億パラメータと700億パラメータの2モデルで、いずれもほぼすべての主要クラウドサービス（AWS、Databricks、Google Cloud、Hugging Face、Kaggle、IBM WatsonX、Microsoft Azure、NVIDIA NIM、Snowflake）で間もなく利用可能になる。... 続きを読む

CohereForAI/c4ai-command-r-plus · Hugging Face

2024/04/04 6 users

Model Card for C4AI Command R+ Model Summary C4AI Command R+ is an open weights research release of a 104B billion parameter model with highly advanced capabilities, this includes Retrieval Augmented Generation (RAG) and tool use to automate sophisticated tasks. The tool use in this model generat... 続きを読む

Cloudflare、AI対応を大幅強化 ー Workers AIの一般提供開始、Pythonサポート、Hugging Faceとのパートナーシップ拡張

2024/04/02 5 users CloudFlare workers パートナーシップ 拡張

4月3日、Cloudflareは「Workers AI」の一般提供開始（GA）と複数の新機能を公開した。 この発表は、AI推論プラットフォームの信頼性とパフォーマンスの向上、GPUハードウェアの更新、Hugging Faceとのパートナーシップの拡張、独自のLoRAファインチューニング推論の提供、WorkersにおけるPythonサポート、AI Gatewayにお... 続きを読む

楽天グループが大規模言語モデルを公開　Mistralベースの70億パラメータ　商用利用も可能

2024/03/21 8 users 言語モデル 商用利用 楽天グループ 70億パラメータ LLM

楽天グループは3月21日、日本語に特化した大規模言語モデル（LLM）「Rakuten AI 7B」などを公開した。フランスのAIスタートアップ・Mistral AIのLLM「Mistral-7B-v0.1」をベースに開発した70億パラメータのLLM。ライセンスは「Apache 2.0」で、Hugging Faceからダウンロードできる。商用利用も可能。 インストラクション... 続きを読む

Abacus AIがリリースしたオープンソースLLM「Smaug-72B」がHugging FaceのOpen LLM LeaderboardでトップとなりいくつかのベンチマークでGPT-3.5を上回ったことが明らかに

2024/02/08 6 users オープンソースLLM ベンチマーク GPT-3.5 アリババ

アリババのオープンソース言語モデル「Qwen-72B」を微調整して作られた「Smaug-72B」が2024年2月6日に登場し、同時にSmaug-72Bが「世界最高のオープンソース言語モデル」の座を獲得したことが明らかになりました。 abacusai/Smaug-72B-v0.1 · Hugging Face https://huggingface.co/abacusai/Smaug-72B-v0.1 Smaug-72B - ... 続きを読む

Google CloudとHugging Faceが提携　AI開発者にH100などのパワーを提供へ

2024/01/26 16 users 米Hugging Face 提携 ソース トレーニング パワー

Google CloudとオープンソースのAI開発プラットフォームのHugging Faceが戦略的提携を発表した。開発者はAIモデルをGoogle Cloudで効率よくトレーニング、調整、提供できるようになる。 米GoogleのクラウドサービスGoogle Cloudは1月25日（現地時間）、オープンソースのAI開発プラットフォームを手掛ける米Hugging Face... 続きを読む

LLMのプロンプトをCI/CDで評価する。promptfooを使って - Gunosy Tech Blog

2024/01/16 7 users LLM OpenAI chatgpt プロンプト 大手クラウド

こんにちは。 LLM事業部のUTです。 概要 promptfoo の紹介 起動 CI での評価 GitHub Action まとめ 概要 OpenAI による ChatGPT 登場の衝撃から1年ほど経ちましたが、 LLM を活用する企業はものすごく増えました。 OpenAI だけでなく、大手クラウドや Hugging Face などを通して各企業も提供しています。 遊びで使う分に... 続きを読む

【Zephyr 7b Alpha】ついにLlama 2を超えるLLM現る！HuggingFaceの最強AI | WEEL

2023/10/13 9 users HuggingFace WEEL ファインチューニング 性能

Zephyr 7b Alphaは、Hugging FaceがリリースしたMistral AIのMistral 7bのファインチューニングモデルで、なんと10倍ほどモデルサイズが大きいChat Llama 70Bと同等の性能を持っています。 ファインチューニングで10倍の差を埋めるのはすごいですよね！ 今回は、Zephyr 7b Alphaの概要や仕組み、実際に使ってみた感想を... 続きを読む

GPT-4を上回るオープンなLLM誕生？　中国研究者らが「Xwin-LM」公開

2023/09/20 17 users GPT-4 米OpenAI 生成AI 性能 言語モデル

米OpenAIの生成AI「GPT-4」を上回る性能をうたうAI「Xwin-LM」が、AIモデル共有サイト「Hugging Face」に公開されている。言語モデルのベンチマークサイト「AlpacaEval」でGPT-4を追い抜き1位を獲得したとしている。 米OpenAIの生成AI「GPT-4」を上回る性能をうたうAI「Xwin-LM」が、AIモデル共有サイト「Hugging Face」... 続きを読む

Hugging Face、Appleデバイス上で大規模言語モデルを実行するためのSwiftパッケージとDemoアプリを公開。

2023/08/09 10 users first appeare Mac Appleデバイス上

Hugging FaceがApple Siliconを搭載したMacなどAppleデバイス上で大規模言語モデルを実行するためのSwiftパッケージとDemoアプリを公開しています。詳細は以下から。 　学習済みの機械学習 The post Hugging Face、Appleデバイス上で大規模言語モデルを実行するためのSwiftパッケージとDemoアプリを公開。 first appeare... 続きを読む

1万種類を超える大規模言語モデル(LLM)をまとめてダウンロード数や類似性などを分かりやすく視覚化したデータライブラリが公開される

2023/07/22 20 users LLM Bard データライブラリ chatgpt リポジトリ

2022年後半から「ChatGPT」や「Bard」など数え切れないほどの大規模言語モデル(LLM)およびAIサービスが登場し、世界中のユーザーが生成AIを積極的に使い始めるようになりました。こうした大規模言語モデルの多くは機械学習モデルとデータセットのリポジトリであるHugging Faceに寄託されていますが、スタンフォード大学... 続きを読む

「オープンサイエンスとオープンソースAIは国益に合致する」とAIプラットフォーム・Hugging FaceのCEOが議会で証言

2023/06/29 7 users 国益 公聴会 証言 CEO 議会

Hugging Faceは主に自然言語処理を対象にしたオープンソースプラットフォームであり、さまざまなAI関連のライブラリやモデルが公開されています。そんなHugging Faceのクレメント・デラングCEOがアメリカ合衆国下院の公聴会に出席し、「オープンサイエンスとオープンソースAIは、アメリカの価値観と国益に合致している」... 続きを読む

マイクロソフト、軽量かつ高性能な大規模言語モデル「phi-1」を発表

2023/06/23 134 users phi-1 Transformerベース マイクロソフト

Microsoft ResearchのAI研究チームは6月20日（現地時間）、わずか13億パラメーターと従来のものよりもサイズが小さいにも関わらず「GPT-3.5（1750億パラメーター）」を上回る成績を収めたTransformerベースの大規模言語モデル「phi-1」を発表した。このモデルは間もなく「Hugging Face」で公開される予定だといいう。 ベ... 続きを読む

Meta、テキストや旋律から音楽を生成するAI「MusicGen」をオープンソース化　Hugging Faceでお試し可能

2023/06/12 13 users Meta MusicGen プロンプト 旋律 米Meta

Meta、テキストや旋律から音楽を生成するAI「MusicGen」をオープンソース化　Hugging Faceでお試し可能 Metaは、音楽生成モデル「MusicGen」をオープンソースで公開した。「ドライブ向きな80年代ポップス風でテンポは120bpm」などというプロンプトで音楽を生成できる。Hugging Faceで試せる。 米Metaは6月9日（現地時間... 続きを読む

オープンソースで商用利用可能な大規模言語モデル「Falcon」が登場、オープンソースモデルの中では最高の性能に

2023/06/06 13 users Falcon アラブ首長国連邦 首都アブダビ 拠点 性能

アラブ首長国連邦の首都アブダビに拠点を置く研究機関「Technology Innovation Institute」がオープンソースの大規模言語モデル「Falcon」をリリースし、機械学習関連のデータ共有サイト「Hugging Face」にてモデルを公開しました。 Falcon LLM - Home https://falconllm.tii.ae/ The Falcon has landed in the Hugging ... 続きを読む

rinna/japanese-gpt-neox-3.6b-instruction-sft · Hugging Face

2023/05/17 10 users rinna

japanese-gpt-neox-3.6b-instruction-sft This repository provides a Japanese GPT-NeoX model of 3.6 billion parameters. The model is based on rinna/japanese-gpt-neox-3.6b and has been finetuned to serve as a instruction-following conversational agent. A special format has been adopted to construct i... 続きを読む