ChatGPTを支えた高品質AI作成手法「RLHF」の中身はこんな感じ、面倒なデータ入力・整理はオープンソースでセルフホスト可能なプラットフォーム「Argilla」が便利

2023/06/10 104 users chatgpt RLHF プラットフォーム セルフホスト 実用

RLHFとは「人間の評価による強化学習」のことで、大規模言語モデルをChatGPTなどの実用レベルに至る品質にまで高めた実績のある手法です。RLHFでは教師データを作成したり、大規模言語モデルの回答を評価したりする際に人間がデータを入力する必要があり、特に複数人で作業する場合にデータの管理が大変になってしまうも... 続きを読む

人間が深層学習のAIを理解できないのには、理由がある：朝日新聞GLOBE＋

2019/11/14 199 users 朝日新聞GLOBE 変数 ディープラーニング 深層学習 出力

統計数理研究所の今泉允聡助教＝西村宏治撮影 ■人間にはAIの考えが分からない？ ――ディープラーニングは、大量の「教師データ」を読み込み、入力する変数と、出力する変数との間の関係を見つけ出します。その関係が分かれば、新たなデータを入力したとき、出力が予測できるというわけですが、なぜ人間はそのプロセスを理... 続きを読む

“AIトイレ”で大便の状態を自動判定、LIXILが開発　「教師データは社員の便」　介護施設などの需要見込む - ITmedia NEWS

2019/10/15 254 users LIXIL 大便 見本市 プロトタイプ めど

住宅設備機器などを手掛けるLIXILが、大便の形状や大きさを国際指標に基づいて自動分類できる“AIトイレ”のプロトタイプを、家電やIoT機器の見本市「CEATEC 2019」（10月15日～17日、千葉・幕張メッセ）で展示している。実用化のめどは立っていないが、介護施設などでの利用を想定。介護施設のスタッフは判定結果を見て、... 続きを読む

ノイズのある教師データを用いた機械学習に関する研究サーベイ - ABEJA Tech Blog

2019/07/29 72 users ノイズ 機械学習 アノテーション 日進月歩 荒尾

こんにちは、Research Internの荒尾(@karolis_ml)です。 日進月歩の勢いで研究が進んでいる深層学習ですが、教師あり学習でもっとも大事なデータのアノテーション、応用分野ではまだまだ大変ですよね。例えば、犬の写真から犬種を判断する分類器を作ろうとして教師データが必要になったとき、あなたは以下の画像にどんな... 続きを読む

Python: RFE (Recursive Feature Elimination) で特徴量を選択してみる - CUBE SUGAR CONTAINER

2019/04/20 50 users アルゴリズム Python ノイズ ロバスト 手法

今回は RFE (Recursive Feature Elimination) と呼ばれる手法を使って特徴量選択 (Feature Selection) してみる。 教師データの中には、モデルの性能に寄与しない特徴量が含まれている場合がある。 アルゴリズムがノイズに対して理想的にロバストであれば、有効な特徴量だけを読み取って学習するため特徴量選択は不要か... 続きを読む

Google、プログラミングができなくてもAIツールを作れる「AutoML」のα版提供開始 - ITmedia エンタープライズ

2018/01/18 56 users コーディング 転移 AutoML Vision 人工知能 サー

Googleが、少量の教師データをアップロードして転移学習させるだけでAIツールを構築できる「Cloud AutoML」を発表した。まずは画像認識向けの「AutoML Vision」のα版を提供開始する。 米Googleは1月17日（現地時間）、コーディングの知識がなくてもデータがあれば人工知能（AI）ツールを構築できるサービス「Cloud AutoML」を発表した。まずは画像認識に最適化したサー... 続きを読む

ディープラーニングを使ってドット絵を画像に変換してみた - karaage. [からあげ]

2017/12/17 53 users 論文 ペア pix2pix 人工知能 python 分野

2017 - 12 - 18 ディープラーニングを使ってドット絵を画像に変換してみた 人工知能 python ディープラーニングで新しい画像変換 数ヶ月前ですがディープラーニングの分野で「pix2pix」という技術が話題になりました。これは簡単に言うと画像フィルタを入力画像と出力画像のペア（教師データ）だけから自動で生成してくれる技術です。詳細は、以下の記事や 元の論文 を参照下さい。 pix2p... 続きを読む

Rubyとか使ってクローリングやスクレイピングするノウハウを公開してみる！ - 病みつきエンジニアブログ

2013/12/30 802 users クローリング 端くれ スクレイピング Ruby 題材

2013-12-31 Rubyとか使ってクローリングやスクレイピングするノウハウを公開してみる！ 今まで何度もスクレイピングとかクローリングをしてきたので、マエショリストの端くれとしてコツを公開すべきかなあ、と思い、公開します。 今日の題材は、CNET Newsです。私はウェブ文書にタグ付けをするという研究をしているのですが、そのための教師データとしてクローリングをします。 photo by Se... 続きを読む