ログ基盤のFluentdをFluent Bitに移行して監視ツールを実装した話 - Mirrativ Tech Blog

2024/06/28 149 users fluentd インターン vim環境 インフラ 大学院

はじめまして、Azuma（@azuma_alvin）です。現在大学院の1年生で、2024年2月から4ヶ月間ミラティブのインフラチームにインターンとして参加しました。普段はインフラやMLOpsといった領域に興味があり、最近はVim環境の整備がマイブームです。 本記事では、ログ基盤をFluentdからFluent Bitへ部分移行した経緯とその2種類... 続きを読む

CyberAgent AI事業本部新卒研修「MLOps」の資料を公開します | CyberAgent Developers Blog

2024/06/03 10 users DevOps 施策 インフラ アプリケーション 近年

はじめに 近年、様々な分野で機械学習の利用が進む中、モデルの品質を担保し、継続的な学習を行うための施策が重要視されています。そのため、機械学習のためのDevOpsであるMLOpsの必要性が高まっており、AI事業本部でも研修内容に取り入れています。 より良いMLOpsを構築するためには、アプリケーションやインフラの知... 続きを読む

次世代データ基盤：データレイクハウスを Google Cloud で実現する

2024/02/22 103 users Google Cloud 界隈 クラウドエース トレーニング

はじめに こんにちは、クラウドエース データソリューション部の松本です。 普段はデータ基盤や MLOps の構築をしたり、Google Cloud 認定トレーナーとしてトレーニングを提供しております。また、昨年は Google Cloud Partner Top Engineer 2024 に選出されました。今年も Goodle Cloud 界隈を盛り上げていけるよう頑張... 続きを読む

DynalystのML監視の取り組み事例 | CyberAgent Developers Blog

2023/10/24 8 users Dynalyst 監視 従来 優先順位 予測値

ML監視は従来のソフトウェア開発の監視要素に加え、モデルや予測値、データに関する監視が必要とされています。 監視の優先順位 上述のようにML監視項目は数多くあり、いきなり全ての監視項目を導入するのは難しいです。 クラウドベンダー各社のMLOpsの成熟度モデル [3]のように、ML監視も段階的に取り組んでいくことが... 続きを読む

FMOps/LLMOps：生成系 AI の運用と MLOps との違い | Amazon Web Services

2023/09/08 5 users LLM 生成系 運用 Amazon Web Services

Amazon Web Services ブログ FMOps/LLMOps：生成系 AI の運用と MLOps との違い 最近、多くのお客様は大規模言語モデル (Large Language Model: LLM) に高い期待を示しており、生成系 AI がビジネスをどのように変革できるか考えています。しかし、そのようなソリューションやモデルをビジネスの日常業務に持ち込むこと... 続きを読む

サイバーエージェント、AI開発手法「MLOps」の研修資料を無償公開　全140ページ

2023/05/25 25 users Git mixi サイバーエージェント ミクシィ 無償

関連記事 ミクシィ、新卒向け研修資料を無償公開　「Git」と「テスト・設計」　今後も随時公開 MIXI（旧社名ミクシィ）は、同社の新入社員向け技術研修で使用した資料を無償公開した。 日経新聞、新卒エンジニア向けセキュリティ研修資料を無償公開 日本経済新聞社は、新卒エンジニア向けセキュリティ研修資料を無償公開... 続きを読む

機械学習を実用化するエンジニアリングスキル

2023/02/09 10 users エンジニアリングスキル 機械学習 実用化 文学部 セールス

Transcript Developers Summit 2023 Inspired 機械学習を実用化する エンジニアリングスキル 2023/02/09 Yusuke Shibui 自己紹介 shibui yusuke • もともと文学部の大学院卒。 • いろいろ → Launchable（いまここ） • MLOps & リサーチ & データ基盤 & バックエンド & インフラ & セールス & マーケティングエンジニア ◦... 続きを読む

10X のコスパ重視 MLOps - 10X Product Blog

2022/12/28 17 users 10X Product Blog 10x Stailer

どうも @metalunk です． コスパ，大事ですよね？コストをある値以下に抑えたとき，どれだけパフォーマンスを発揮できるか，という話です． 10X で最初の機械学習プロダクトを作るにあたり，コスパを意識して MLOps 基盤を作ったので，それの紹介をします． Stailer における ML の重要性 レジ前推薦 作りたかったもの ... 続きを読む

機械学習プロジェクトの開発について(MLOps) 〜推薦システムを題材に〜｜masa_kazama｜note

2022/09/16 12 users masa_kazama 演習 Note 題材 講義

東京都立大学大学院で非常勤講師として、「機械学習プロジェクトの開発について(MLOps) 〜推薦システムを題材に〜」というテーマで講義をしました。９０分×３コマの集中講義で、演習も含めたものです。 自分が学生だった頃に、社会人の方の資料や講義がとても参考になってありがたかったので、講義資料を公開します。少... 続きを読む

AIシステムが成熟する今「MLOps」が必要とされる理由とは？ MLOpsを推進するために大切なこと

2022/06/16 8 users DevOps ディープラーニング 近年 従来 背景

近年、機械学習（ML）やディープラーニング（DL）といったAI関連技術をプロダクトへ応用し、新たな価値を生みだそうという動きが加速しています。その中で、従来の「DevOps」の考え方を、機械学習向けに発展させた「MLOps」という新しい概念が生まれ、注目を浴びています。MLOpsが注目される背景には、どのような課題が... 続きを読む

機械学習活用のAIシステム運用に欠かせない「MLOps」とは何か

2022/04/26 10 users 東芝 人工知能 留意点 機械学習 AI技術

東芝は2022年4月20日、同社のAI技術を紹介するセミナーの中で、企業が機械学習を用いたシステムを導入した後、同システムを継続的に改善していく「MLOps」について解説した。MLOpsの基礎知識から、実施する際の留意点などを解説した。 東芝は2022年4月20日、同社のAI（人工知能）技術を紹介するセミナーの中で、企業が機... 続きを読む

検索アルゴリズム改善における機械学習の活用　〜MLOpsについて〜 - ぐるなびをちょっと良くするエンジニアブログ

2022/04/26 19 users レコメンドエンジン 新卒 アルゴリズム自体 田中 機械学習

はじめに こんにちは。 CX部門 データ・AI戦略室 データ戦略Gの田中です。 ぐるなびには2018年に新卒として入社し、レコメンドエンジンの開発や在庫・予約関連のデータ分析等に携わってきました。 現在は主に検索結果の並び順アルゴリズムの改善を行っています。 私たちのチームではアルゴリズム自体の改善に伴い、MLOps... 続きを読む

MLOpsを支えるモニタリングシステム。「Lupus」開発の裏話 - LINE ENGINEERING

2022/02/28 6 users モニタリングシステム 裏話 開発

By LINE Engineering | 2022.01.24 2022.02.10LINE Engineering Blog official account 2021年11月10日・11日の2日間にわたり、LINEのオンライン技術カンファレンス「LINE DEVELOPER DAY 2021」が開催されました。特別連載企画「DEVDAY2021 アフターインタビュー」では、発表内容をさらに深堀りし、発表では触れられなか... 続きを読む

ZOZOからUbie Discoveryに転職しました｜civitaspo｜note

2022/01/27 15 users ZOZO SRE Ubie Discovery エンジニア

2021年12月をもってZOZOを退職してUbie Discoveryに転職しました。この記事では転職に至る意思決定や入社後の感想を書きます。 自己紹介こんにちは。中山貴博といいます。インターネット上では@civitaspoというIDで活動しています。職種的にはエンジニアで、技術領域的にはDE（データエンジニアリング）やMLOps、SREを主... 続きを読む

【MLOps】「いつか使いたい！」と思っていた人のためのMLflowまとめ - Qiita

2022/01/22 6 users MLflow ハイパーパラメータ ライブラリ 評価指標 学習器

MLflowとは？ MLflowは機械学習のライフサイクル管理（MLOps）を目的としたライブラリで、主に実験管理用途で使用されることの多いツールです。 実験管理とは、 ・使用した学習器や学習データ、ハイパーパラメータ等のモデル作成条件 ・そのモデルを評価して得られた評価指標 のセットを記録し、複数条件の比較を行うこ... 続きを読む

JX通信社における実践的MLOps

2021/11/23 11 users JX通信社

Transcript +9௨৴ࣾʹ͓͚Δ� ࣮ફత.-0QT 'FOH�8BOH� +9�1SFTT�$PSQPSBUJPO�.BDIJOF�-FBSOJOH�&OHJOFFS � �ਝ଎ͳχϡʔε଎ใൃ৴Λࢧ͑Δ.-0QT Agenda 1, +9௨৴ࣾͷػցֶशλεΫ � �ࣄۀഎܠʹԊͬͨ�.-0QT�ϓϥΫςΟε ࠓ೔ൃදͷ಺༰ɿ ɾػցֶशϞσϧ࡞੒ͷϑϩʔʢखಈͷ࣌ظʣ� ɾ.-0QT�Ϋϥ΢υԽͷ޻෉ͱ՝୊ղܾ 2,ݱঢ়෼ੳͱ໰୊఺ �,ձࣾ঺հ ˞�IUUQT���TQFBLFSEFDL�DPN�KYQSFTT�JOUSPEVDUJPO 0,ձࣾ঺հ ςΫϊϩδʔͰɺtoB/toCͷʮ஌Γ͍ͨʯʹԠ͑ΔαʔϏ... 続きを読む

モデリング施策を高速・安全に回せる、MLOpsの仕組みづくり

2021/11/08 8 users サイエンス統括本部 ログ収集 機械学習エンジニア 運用 事例

こんにちは。サイエンス統括本部で機械学習エンジニアをしている芹沢です。ヤフー全社で使われているレコメンドプラットフォームを担当するプロジェクトに所属し、ログ収集・学習ジョブの開発/運用やMLOpsに関連する業務を行っています。 本記事ではそのMLOps業務の中からモデリング業務の効率化の取り組み事例を紹介し... 続きを読む

MLOps の利用を開始: ユースケースに適した機能の選択 | Google Cloud Blog

2021/07/12 21 users ユースケース Google Cloud Blog 開始 機能

GCP を試すStart building on Google Cloud with $300 in free credits and 20+ always free products. 無料トライアル ※この投稿は米国時間 2021 年 6 月 25 日に、Google Cloud blog に投稿さ&#1... 続きを読む

MLOpsはバズワード

2021/06/16 9 users パスワード fetaro Online Tokyo 徹太郎

MLOpsはバズワード 1. Mobility Technologies Co., Ltd. MLOpsはバズワード 株式会社 Mobility Technologies 渡部 徹太郎 2021/6/16 第8回 MLOps 勉強会 Tokyo (Online) 2. Mobility Technologies Co., Ltd. 自己紹介 2 ID ：fetaro 名前：渡部 徹太郎 学生：東京工業大学でデータベースと情報検索の研究 (@日本データベ... 続きを読む

2020年05月時点で自分が実践しているMLOps, MLEng の情報収集方法 | Shunya Ueta

2021/05/29 16 users Shunya Ueta 情報収集方法 自分

先日、同僚に機械学習適用に興味があるんだけど、おすすめの資料があったら教えてほしいと言われ、情報をまとめてみた際に現時点でのおすすめの資料としてまとめておいたら、数年後見返したら面白そうだと思ったので記事として公開しておく。 おすすめの資料プロジェクトマネジメントや考え方、思想How Google does Mach... 続きを読む

2021年の「AI／機械学習」はこうなる！　5大予測：気になるニュース＆ネット記事 - ＠IT

2020/12/28 6 users 機械学習 ニュース＆ネット記事 Transformer 革命

自然言語処理（NLP）に革命を起こした手法「Transformer」の利用領域がさらに拡大する ディープラーニング以外の機械学習関連技術に対する認知と利用が広がる AI／機械学習の倫理問題はさらに大きくなり、データとプライバシーの規制が強化される MLOpsはさらに成長し、採用する企業が増えていく エッジAIが普及し、エッ... 続きを読む

MLOpsに必要な情報全部BigQueryに置いたら想像以上に捗った話 - Qiita

2020/12/12 11 users Qiita composer 機械学習 運用 本番環境

本記事はMLOps Advent Calendar 2020の13日目の記事です。 こんにちは。昨年本番環境のComposerでやらかしちゃった人です。今年は比較的平穏に機械学習を使用したサービス開発・運用に携われています。 携わっているサービスの1つで「MLOpsに必要な情報BigQueryに全部おいてみた」ところ想像以上に便利だったので、その... 続きを読む

Google、機械学習エンジニア認定制度を開始　「DevOps」ならぬ「MLOps」の知見問う - ITmedia NEWS

2020/11/17 18 users 米Google WEBテスト 機械学習 エンジニア 意図

Googleが始めた技術認定制度「Google Cloud Professional Machine Learning Engineer certification」の意図は？ 米Googleはこのほど、機械学習を応用したシステムを構築するエンジニアに向けて、技術認定制度「Google Cloud Professional Machine Learning Engineer certification」を開始した。Webテストに合格すると... 続きを読む

【開催報告 & 資料公開】 AI/ML@Tokyo #7 AWSにおけるMLOps 開催報告 | Amazon Web Services ブログ

2020/10/30 5 users オンライ 卜部 AWS 機械学習ソリューションアーキテクト

Amazon Web Services ブログ 【開催報告 & 資料公開】 AI/ML@Tokyo #7 AWSにおけるMLOps 開催報告 アマゾン ウェブ サービス ジャパン株式会社 機械学習ソリューションアーキテクトの卜部です。AWS Japan では、AI/ML 関連情報を発信するイベント「AWS AI/ML@Tokyo」を定期的に開催しています。2020年10月15日にオンライ... 続きを読む

第1回勉強会：なぜ今MLOpsなのか、先駆者や実際の現場からMLOpsを学ぼう：MLOpsイベントレポート - ＠IT

2020/09/14 11 users 運用 先駆者 機械学習モデル 現場 開発

MLOpsイベントレポート：第1回勉強会：なぜ今MLOpsなのか、先駆者や実際の現場からMLOpsを学ぼう MLOpsコミュニティーのイベントレポート連載。今回は「MLOpsとは何で、今なぜそれが必要なのか」「実際にMLOpsでやることとは何か」「機械学習モデルの開発から運用におけるMLOpsがなぜうまくいかないのか、どうすればよい... 続きを読む