Dockerで構築する機械学習環境【2024年版】

2024/03/11 192 users Docker LLM karaage0703 特性 機械学習

Dockerを使った機械学習環境の構築方法 株式会社松尾研究所で働いているからあげ（@karaage0703）です。松尾研究所では、機械学習（ここでは、予測モデル、画像認識からLLMまで幅広く扱います）を使う多数のプロジェクトが走っています。プロジェクトの特性は多種多様なので、環境構築方法は様々なのですが、松尾研究所... 続きを読む

Argo Workflowsを使った機械学習環境の構築手順 - アダコテック技術ブログ

2023/10/05 9 users Argo Workflows 構築手順 柿崎 要点 機械学習

はじめに テックリードの柿崎です。私たちは、機械学習のパラメータチューニングを効率よく行うため、KubernetesネイティブのワークフローエンジンであるArgo Workflowsを採用しています。この記事では、その導入手順の要点を紹介いたします。 導入の目的 Argo Workflows導入以前は機械学習のパラメータチューニングを行... 続きを読む

無料でRustのJupyterLab機械学習環境を作る in AWS

2021/12/23 12 users rust 追随 Python 少数派 機械学習

この記事はRust Advent Calendar 2021の23日目の記事です。 Rustで機械学習をやってみたいという方は少数派かもしれません。PythonやRの環境が圧倒的過ぎて他の追随を許さないからです。しかしそれがタダで手に入るとなったらいかがでしょうか？　ブラウザだけでどこでも利用できるRustの機械学習環境をクラウド上に持て... 続きを読む

MakefileでDocker+Jupyter Notebookなどの機械学習環境をスマートに扱う - CC-56

2021/02/14 14 users notebook Makefile Docker 引数 少数派

先日機械学習界隈の方とDockerの話をした際、Makefileを使って機械学習環境の整備をしている人は実は少数派なんじゃないかと感じました。 機械学習で使うコマンドは引数が長く、とても覚えられるものじゃありません。暗記できていてもミスタイプしたり、tmux内とかだと折り返されて何書いてるかよくわからなくなりがち ... 続きを読む