LLMを活用した機械学習モデルのアノテーション効率化 - LayerX エンジニアブログ

2024/08/13 10 users LLM Large Language Models 吉田

機械学習エンジニアの吉田です。今回は、LLM (Large Language Models) を活用して、機械学習モデルに必要なデータのアノテーション作業を効率化する取り組みについて紹介します。 なお、アノテーションにおけるLLMの利用に関しては、クラウドベンダー各社及び社内の法務確認のうえ進めています。この記事で登場するLLMが... 続きを読む

アノテーションにおけるUIの工夫 - CADDi Tech Blog

2024/04/22 10 users PoC 試用 知見 MLOpsチーム 工夫

こんにちは、MLOpsチームです。先日OCRモデルを学習するためのアノテーションにおいて、作業効率を検証するためのPoCとしてアノテーションUIを開発しました。本記事ではこのアノテーションUIにおける工夫について、試用によって得られた知見をまじえつつ紹介します。 はじめに アノテーションUIを開発することとなった背... 続きを読む

自動運転のための大規模なVisual QAデータセット・AutoScenesQAの作成

2023/10/23 13 users LLM Turing 自動運転 ロジック サマーインターン

本記事では、Turing のサマーインターンでの成果を紹介します。2 週間のサマーインターンで、自動運転のための Visual Question Answering データセット・AutoScenesQA の作成を行いました。 AutoScenesQA は、手作業によるアノテーションではなく、LLM(GPT 3.5)とルールベースのロジックを活用し、完全に自動で作成され... 続きを読む

Kubernetes で Pod が使用できる Secret を制限する方法 - Qiita

2023/06/15 15 users Qiita Kubernetes POD true 方法

Pod が使用できる Secret を制限する方法 Kubrenetes では、ServiceAccount リソースに kubernetes.io/enforce-mountable-secrets アノテーションを true で設定することで、その ServiceAccount で実行する Pod が secrets フィールドで指定された同一 Namespace の Secret しか使用できない (マウントできない) ように... 続きを読む

アノテーションなのに手入力ゼロ！？バクラクのOCRを支えるアノテーション基盤（アプリケーション編） - LayerX エンジニアブログ

2023/05/31 14 users Tomoaki サジェスト OCR バクラク 日付

こんにちは、全ての経済活動をデジタル化したいTomoakiです。 バクラクのOCR バクラクでは請求書や領収書をはじめ、国税関係書類に対してOCRを実行し入力のサジェストを行うことで、ユーザーが書類の内容を手入力する手間を省いています。例えばこちらの領収書、日付、金額、支払先を自動で読み取ってユーザーにサジェス... 続きを読む

グループ会社3社合同で「アルムナイ(卒業生・同窓生)の集い」を開催しました。 | DevelopersIO

2023/05/22 8 users アルムナイ DevelopersIO クラスメソッド 同窓生

2023年05月19日(金)、弊社日比谷オフィスにてクラスメソッド、アノテーション、ネクストモード、グループ会社合同で退職者同士の交流を促す「アルムナイの集い」を開催しました。 今回初となったこの試み。様々な伝手を頼り呼び掛けをさせて頂き、結果的にはアルムナイな方々約50人に御参加頂く形となり、大いに盛り上が... 続きを読む

Next.js + OpenAI API で作った画像生成アプリで遊んでみた | DevelopersIO

2023/03/26 11 users DevelopersIO Shimizu React API

OpenAI API と React(Next.js) を利用した簡単な画像生成アプリの作り方を、サンプルコード付きでご紹介しています。 こんにちは、アノテーション テクニカルサポートの Shimizu です。 筆者の前回の記事では OpenAI API を使用した基本的な質問アプリを Next.js で作成しました。 そこで今回は OpenAI の画像生成 API ... 続きを読む

2023 年 2 月の AWS テクニカルサポートノートまとめ | DevelopersIO

2023/03/03 10 users DevelopersIO メトリクス AWS 中村 原因

こんにちは。アノテーションの中村 (誠) です。 今回は 2023 年 2 月に投稿された AWS テクニカルサポートノートについてのまとめです。 内容 Container Insights でメトリクスが欠損している原因と対処法を教えてください Metric MathのFILL関数をご利用ください。 EC2 インスタンス自動起動時エラー「Automation Step ... 続きを読む

機械学習案件の売り上げが3倍に　画像素材サイト「PIXTA」がアノテーション部門設立

2023/01/19 7 users PIXTA ピクスタ 経緯 機械学習案件 背景

画像素材サイト「PIXTA」などを運営するピクスタは、画像にアノテーション（画像を説明する情報）を付与する専門部署を立ち上げたと発表した。背景には、機械学習案件での売り上げは1年で3倍に拡大した経緯があるという。 画像素材サイト「PIXTA」などを運営するピクスタは1月19日、画像にアノテーション（画像を説明す... 続きを読む

【自動運転】信号機認識に挑む / 走行画像15,000枚のアノテーションとYOLOXモデルによる深層学習実践

2023/01/06 101 users 自動運転

こんにちは。TURING株式会社でインターンをしている、東京大学学部3年の三輪と九州大学修士1年の岩政です。 TURINGは完全自動運転EVの開発・販売を目指すスタートアップです。私たちの所属する自動運転MLチームでは完全自動運転の実現のため、AIモデルの開発や走行データパイプラインの整備を行っています。 完全自動運... 続きを読む

AWS CDK で API Gateway の 4XX/5XX エラーを表示する CloudWatch Dashboard をつくってみた | DevelopersIO

2022/09/16 12 users DevelopersIO クラスメソッド AWS CDK

AWS CDK で API Gateway の 4XX/5XX エラーを表示する CloudWatch Dashboard をつくってみた はじめに おひさしぶりです。アノテーション の中野です。 7 月からクラスメソッドの CX 事業本部 Delivery 部 LINE グループの保守運用のお手伝いをしながらアノテーション内の新規業務立ち上げにチャレンジしています。 今回... 続きを読む

Jest で落ちたアサーションを GitHub のアノテーションに出す - Diary of a Perpetual Student

2022/09/08 12 users GitHub Jest アサーション assertion

最近 GitHub Actions を弄くり倒すことにハマっていて、 GitHub の Checks API を利用して annotation を出すおもてなしをすることだけが生きがいだと思って生活していました。 そんな中、JavaScript (TypeScript) のコードのテストでよく使われている Jest で、どの assertion が落ちているかを annotation で分かりや... 続きを読む

マイクロソフト、JavaScriptに型宣言を追加しつつトランスパイラ不要の「Types as Comments」をJavaScript仕様策定会議のTC39に提案へ

2022/03/10 104 users トランスパイラ 注釈 エディタ 変数 マイクロソフト

マイクロソフト、JavaScriptに型宣言を追加しつつトランスパイラ不要の「Types as Comments」をJavaScript仕様策定会議のTC39に提案へ マイクロソフトのTypeScript開発チームは、JavaScriptのコードにTypeScript互換のアノテーション（注釈）を加えることで変数や関数などの型を宣言し、エディタなどのツールで型情報を... 続きを読む

claspを使ってGoogle Apps Scriptの開発環境を構築してみた | DevelopersIO

2021/09/08 15 users DevelopersIO vscode GAS 髙嶋 手順

はじめに アノテーションの髙嶋です 今回はGoogle Apps Script（以降、GAS）の開発環境を自端末内に構築した際の手順を書いています。 GASにはGoogleが提供しているWEBエディターがあるので、そちらを使用すればすぐにプログラムを書き始めることができます。 私はVisual Studio Code（以降、VSCode）を使用したいので、... 続きを読む

AWS テクニカルサポートで得た暗黙知をまとめてみた | DevelopersIO

2021/07/07 234 users DevelopersIO クラスメソッドメンバーズ 暗黙知

AWS テクニカルサポートを 5 年経験して アノテーションの荒川です。 クラスメソッドメンバーズをご契約いただいているお客様のテクニカルサポート業務を始めて、早 5 年が経過しました。 私が対応したチケット件数をざっくりと調べたところ、本日時点で 1685 件でした。 最近は私がチケット対応する機会は減りまして、... 続きを読む

くらめその情シス：社内基幹のIdPをAzureADに切り替えたおはなし | DevelopersIO

2021/03/03 5 users IdP DevelopersIO AzureAD 目途 情シス

はじめに どうも、情シスやってますアノテーションの徳道です。 社内のMDM移行もいろいろ目途がつき、2021年2月にGoogle WorkspaceやSalesforceなど社内基幹のシングルサインオンをAzureADに切り替えました。 1年近くほぼAzure関連の導入・運用検討をしつつ記事を書いてきましたが、ここが一つの区切りかな、というとこ... 続きを読む

会社のMacをjamfでリモート管理してみた | DevelopersIO

2021/03/02 6 users DevelopersIO jamf 畠山 リモート 一口

はじめに こんにちは。 情シス担当、アノテーションの畠山です。 これまで、jamfの導入や設定について書いてきましたが、今回はそれらの運用についても書いてみたいと思います。 運用と一口に言っても、会社で使用するMacには必要なことが色々とあります。 特にセキュリティに関しては、ウィルス対策ソフトや資産管理、... 続きを読む

keras-yolo3 で独自データセットに対して学習させる方法 - ほぼPython

2020/06/14 7 users Python train 物体検出 データセット 何番煎じ

何番煎じなんだって感じもしますが、まとめておきます。 「keras-yolo3で学習済みモデルを使って一般的な物体検出はできた」という方が対象です。 独自データセットで学習させるためには大きく分けて3つのことをすればいいです。 ・データのアノテーション ・train.pyによる学習 ・独自データによる学習済みモデルを読み... 続きを読む

GitHub ActionsでのJestのテスト実行時に失敗箇所をPRへのアノテーションとして表示するレポーター - いけだや技術ノート

2020/04/03 7 users Jest debug Actions Warning コマンド

このような便利なパッケージがありました。 GitHub Actionsにはworkflow commandsと呼ばれる、echoコマンドと特定の形式の文字列を使うことでActionsの処理に一部介入できる機能があります。その中にはファイルの特定の箇所（行・カラム）にdebug/warning/errorメッセージをPRのアノテーションとして追加できるコマンド... 続きを読む

Mackerel : グラフアノテーションを登録するパターン集 - kakakakakku blog

2020/02/25 5 users mackerel メトリクス グラフアノテーション 推移 実際

新機能ではないけど，Mackerel の「グラフアノテーション機能」は便利でよく使っている．メトリクスの推移を分析するときに，同じタイミングで発生したイベント情報（デプロイ／キャンペーン開始／テレビ放送など）と紐付けることができる．実際にアノテーションを登録するときに「個人的によく使うパターン」がいくつか... 続きを読む

高精度なアニメ顔検出をアノテーションなし(Domain Adaptation)で実現してみた - Qiita

2019/11/26 9 users Qiita 精度 アニメ顔検出

はじめに アニメ顔の検出器としてlbpcascade_animefaceが広く利用されています。 しかし、lbpcascade_animefaceは基本的に正面に近い姿勢の顔しか認識できないため、横向きなどの顔を認識することが困難です。 一方、（実写の）顔画像認識はDeepLearningにより高精度化が進んでいます。 顔画像認識技術の進化をアニメ顔... 続きを読む

ノイズのある教師データを用いた機械学習に関する研究サーベイ - ABEJA Tech Blog

2019/07/29 72 users ノイズ 機械学習 ABEJA Tech Blog 教師データ

こんにちは、Research Internの荒尾(@karolis_ml)です。 日進月歩の勢いで研究が進んでいる深層学習ですが、教師あり学習でもっとも大事なデータのアノテーション、応用分野ではまだまだ大変ですよね。例えば、犬の写真から犬種を判断する分類器を作ろうとして教師データが必要になったとき、あなたは以下の画像にどんな... 続きを読む

効率的な教師データ作成(アノテーション)のための研究サーベイ - ABEJA Arts Blog

2019/05/23 100 users ABEJA Arts Blog

どうも緒方@conta_です。 みなさんAI頑張ってますか？ きっと昼はGPUサーバーを回して、夜は結果待ちでビールサーバーを回してる人が多いことでしょう。 機械学習を実際のプロダクトに活用する場合、自分が解きたいタスクがそのままオープンなデータセットで解決できることは少ないので、まず最初に課題となるのはデータ... 続きを読む

ロボットは東大に入れるか。Todai Robot Project

2018/11/05 30 users 東大 ロボット XML 独立行政法人大学入試センター 元データ

「ロボットは東大に入れるか」プロジェクトで開発した大学入試センター試験1990年度～2017年度の電子化問題データを公開します。 このデータは、本プロジェクトにおいて、川添愛氏を中心としてXMLによる構造化仕様を策定し、アノテーションを実施したものです。 元データの著作権者である独立行政法人大学入試センターの... 続きを読む

機械学習にアノテーションを活用して、商品検索の関連キーワード機能を作る - BASE開発チームブログ

2018/10/17 39 users 機械学習 BASE開発チームブログ 商品検索

DataStrategyの齋藤（@pigooosuke）です。 ネットショップ作成サービス「BASE」は60万店舗のショップが利用しており、ショッピングアプリ「BASE」のユーザーは、新着商品、キーワード検索、関連商品、商品特集などを介して気になる商品を見つけることができます。今回、新機能として、検索ワードに関連するキーワードを... 続きを読む