Meta、無料で商用可の新LLM「Llama 3」、ほぼすべてのクラウドでアクセス可能に

2024/04/19 29 users Meta LLM Snowflake Databricks

米Metaは4月18日（現地時間）、オープンソースのLLMの最新版「Llama 3」を発表した。80億パラメータと700億パラメータの2モデルで、いずれもほぼすべての主要クラウドサービス（AWS、Databricks、Google Cloud、Hugging Face、Kaggle、IBM WatsonX、Microsoft Azure、NVIDIA NIM、Snowflake）で間もなく利用可能になる。... 続きを読む

KaggleのNLPコンペで初手に使える可視化 〜BERTopicを用いた文書クラスタリングと可視化〜

2024/03/03 14 users Transformers 初手 Kaggleコンペ 出力 文書

BERTopic は、Transformersを用いて文書のトピックモデリングを行うためのPythonライブラリです。本記事では、自分がKaggleコンペの初手EDAによく使うコードをまとめました。 入出力のイメージ 入力： 文章のリスト （例：["I am sure some bashers of Pens fans ...", "My brother is in the market for a high-perform... 続きを読む

Kaggleで始める機械学習入門 - Qiita

2024/01/01 10 users Qiita GPU チュートリアル ハードル プラットフォーム

機械学習を学んで何かをコードを作ってみよう、と思うときにネックになるのが学習用データと実行環境ですよね。何千件もあるデータを用意するのは大変ですし、初学者にとって高価なGPUを購入するのはハードルが高いです。 そこで機械学習のプラットフォームであるKaggleを利用し、チュートリアルでタイタニック生存者予... 続きを読む

趣味でKaggleを始めたことをきっかけにデータサイエンティストになった話 - Qiita

2023/12/20 267 users Qiita Rush GAP MUJ データサイエンティスト

Kaggleアドベントカレンダー2023の19日目の記事です． TL;DR データ分析未経験からkaggleでどんなことを学んだか 想像していたデータ分析と実業務とのGap kaggleやっていて良かったこと、kaggleでは学ばなかったこと はじめに 趣味でkaggleを始めたことをきっかけに、現在はデータ分析の仕事をしています。 Muj!rush!と... 続きを読む

「面倒なことはChatGPTにやらせよう」を講談社から出版します。｜カレーちゃん

2023/12/13 15 users Twitter Grandmaster chatgpt 称号

以下この本の容を紹介します。 はじめにTwitterではカレーちゃんという名前で活動しております。普段はAIエンジニアとして働いており、趣味ではKaggleというデータ分析コンペティションで、「GrandMaster」という称号を獲得しております。 今年の3月にリリースされた、ChatGPTの「GPT-4」や「プログラミングが使えるAdva... 続きを読む

Kaggleで銅・銀・金メダルを取るプロセス｜カレーちゃん

2023/11/26 105 users Twitter ディスカッション 銅メダル プロセス 銀メダル

Kaggleで銅メダル、銀メダル、金メダルを取るプロセスの違いや、具体的に何をすべきかについて質問がありました。 Twitterで回答を募集したところ、次の回答をもらいました。 過去に似たコンペ2,3コンペ漁って1~10位までの解法に目を通しつつ、現コンペのディスカッションを全部追って効くものを試すと銀メダルは取れる... 続きを読む

Kaggleのハードルを下げたい！ - Qiita

2023/10/17 182 users Qiita ハードル ルール 原因 初見

Image generated by OpenAI's DALL·E-3. はじめに こんにちは！ 突然ですが、Kaggleのハードルって高くないですか？特に初見だと、複雑なルールや大量のデータなどに圧倒されてしまう人も多いかもしれませんね。また、全て英語なので非英語話者にとってはそこもハードルを上げる原因になっていると考えられます。実際は... 続きを読む

「Kaggleで勝つデータ分析の技術」から見る実用的な機械学習の知見

2023/08/10 30 users 知見 本書 機械学習 機会学習 データ分析

はじめに 機械学習に関する実用的な知見を知るために、「Kaggleで勝つデータ分析の技術」を読んだので、Kaggle以外の場面でも活用できる話題をまとめてみた。本書は機械学習の基本的な内容も含んでいるが、この記事では機会学習に関する一通りの知識を持ち、実問題に利用している読者を想定してまとめた。従って、勾配ブ... 続きを読む

高速で持続可能な開発のためのソフトウェア工学と機械学習への適用

2023/05/25 96 users ソフトウェア工学 持続 機械学習 適用 開発

こんにちは、Wantedlyで推薦システムを開発している樋口です。Kaggleや実務での機械学習の開発にて、過去に下記のような失敗がありました。 精度改善のために実験を繰り返し追加したら、PRが巨大になり、レビューに時間がかかった 学習結果を確認したら、パラメータを一部だけ間違えていて、再度長い実験をやり直した こ... 続きを読む

書籍「Kaggleに挑む深層学習プログラミングの極意」発売します - iwiwiの日記

2023/02/01 12 users iwiwi 極意 深層学習プログラミング 耕平 書籍

共著で執筆した書籍「Kaggleに挑む深層学習プログラミングの極意」が明日(2023/2/2)発売するのでそちらの紹介です。既に書店によっては店頭に並んでいるようです。 Kaggleに挑む深層学習プログラミングの極意 (KS情報科学専門書) 作者:小嵜 耕平,秋葉 拓哉,林 孝紀,石原 祥太郎講談社Amazon https://www.kspub.co.jp/boo... 続きを読む

Kaggleや競プロのトップランカーが持つ「本質的な強み」とは。リクルートが作り出す、競技と業務の好循環 - はてなニュース

2023/01/18 88 users コンペティション データサイエンティスト リクルート 精度

ソフトウェアエンジニアがプログラミングの腕を競い合う競技プログラミングや、データサイエンティストや機械学習エンジニアが機械学習モデルの精度を競い合うKaggle。こうしたコンペティションのトップランカーが持つテクニックやスキルを実際の業務にも活かそうとしている、あるいはすでに活かしている企業も少なくな... 続きを読む

kenken on Twitter: "完全初心者の状態で、Pythonの独学を始めて約2年🤔 約60冊の書籍を写経・消化してきたので、結構、実力がついたのかな🤔 2年間の棚卸として、僕が、写経・独学してきた書

2023/01/02 847 users 写経 棚卸 Python 独学 実力

完全初心者の状態で、Pythonの独学を始めて約2年🤔 約60冊の書籍を写経・消化してきたので、結構、実力がついたのかな🤔 2年間の棚卸として、僕が、写経・独学してきた書籍とKaggleの取り組みを紹介したいと思います☺️ 全… https://t.co/KL7fSg0cyl 続きを読む

Kaggleで使用される敵対学習方法AWPの論文解説と実装解説 ~Adversarial Weight Perturbation Helps Robust Generalization~

2022/08/31 14 users AWP 論文解説 実装解説 摂動 実装

Kaggleで使用される敵対学習方法AWPの論文解説と実装解説 ~Adversarial Weight Perturbation Helps Robust Generalization~ 本資料では、AWPという学習手法について、元論文と実装の解説を行っている。 AWPはモデルに敵対的な摂動を加えながら学習するという手法で、汎化能力が高まることからKaggleで人気の手法となって... 続きを読む

元iOSエンジニアの自分が、我妻先生の「みんなのKaggle講座」のPython基礎で特に学びになったことをまとめてみた - Qiita

2022/07/15 27 users Qiita Udemy Python みなさん みんな

Udemyの我妻先生の「みんなのKaggle講座」 を受講させていただきました。 大変わかりやすかったので、Kaggleに取り組んでみたいと思われているみなさんにおすすめです。この記事を見て、少しでも気になった方はぜひ購入してみてください。 自分は元iOSエンジニアということもあり、Pythonの書き方がなれていなかったので... 続きを読む

H&Mコンペで銀メダルを獲得したソリューション - ANDPAD Tech Blog

2022/05/19 18 users ソリューション 銀メダル ANDPAD Tech Blog

アンドパッドのデータ基盤チームに所属している成松です。 先日までkaggleで開催されていたH&M Personalized Fashion Recommendationsにて、私が参加したチームが2,952チーム中22位で銀メダルを獲得しました！ そこで、本記事ではH&Mコンペの簡単な概要説明と私個人のSolution（Private 36位相当）について紹介します。 ... 続きを読む

Kaggleで得られるのは“技術領域の深化”と“専門分野の拡張”　DeNAのKaggle Grandmasterたちが語る、AIエンジニアとしての生存戦略

2022/04/25 12 users Tier 深化 DeNA 大久保 コモディティ化

コモディティ化するKaggleのTier　差別化のポイントは？ 大久保渉太氏（以下、大久保）：では次の質問に行きます。「昨今、特に日本においてKaggleのTierは、コモディティ化しつつあるように見えます。これについてどう思われますか？　そこで大切になる、Tierだけでは表せない差別化ポイントは何だと思いますか？」。こ... 続きを読む

遅くないpandasの書き方 - ML_BearのKaggleな日常

2021/12/07 12 users pandas ML_Bear 欠点 データ分析ライブラリ 処理

これは何？ この記事は Kaggle Advent Calendar 2021 の7日目の記事です。 pandasはデータ分析ライブラリとして非常に便利ですが、書き方を間違えると簡単に処理が遅くなってしまうという欠点があります。そこで、この記事では遅くならない書き方をするために気をつけたいポイントをいくつかご紹介したいと思います。 こ... 続きを読む

Kaggle Grandmasterへの道 ～ データサイエンティスト“最高峰”を目指す

2021/11/08 17 users Kaggle Grandmaster 最高峰 称号 連載目次

2021年度リクルート入社の2人のKaggle Grandmasterにインタビュー。Kaggle Grandmasterを目指すために意識しておくべきポイントや戦略について解説する。これを読んで、データサイエンティストとして“最高峰”の称号を目指そう。 連載目次 この連載では、近年話題のコンペティションプラットフォーム「Kaggle」について、... 続きを読む

学生だけど正社員！Kaggler&競プロerの23歳アルゴリズムエンジニアにインタビュー | 株式会社AppBrew

2021/04/08 19 users 株式会社AppBrew インタビュー 正社員 学生 平尾

こんにちは、AppBrew（アップブリュー）の阿部です。 今回インタビューでご紹介するのはProductGrowthチームでアルゴリズムエンジニアを務める平尾 礼央（ひらお れお）。 平尾は高専を卒業後、首都大学東京システムデザイン学部情報通信システムコースに編入。大学で自然言語処理を学ぶ傍ら、Kaggleの機械学習コンペで... 続きを読む

Kaggleで勝ちっぱなしのデータサイエンティストに話を聞いてみた | AI専門ニュースメディア AINOW

2021/02/22 71 users AINOW エバンジェリスト medium 著者 同氏

著者のParul Pandey氏は世界各地に拠点のあるAIスタートアップH2O.aiでデータサイエンス・エバンジェリストを務めており、AINOW翻訳記事『あなたのビジネスにAI戦略を効果的に使用する方法』の著者でもあります。同氏が最近Mediumに投稿した記事では、H2O.aiに所属するKaggleグランドマスターにKaggleの取り組み方に関し... 続きを読む

Kaggle で10年遊んだ GrandMaster の振り返り

2021/02/18 49 users アルゴリズム モチベーション エンジニア 資産 目標

2021-02-18 2011年2月16日に Kaggle アカウントを取得して10年が経過した。長い間 Kaggle Ranking 世界 1 位を目指してきたが、この目標やモチベーションが大きく変化してきたと感じたため、一区切りつけるためにもこの10年+αを振り返る。今の目標は対象を問わずアルゴリズムで資産を最大化すること。データとエンジニア... 続きを読む

「データサイエンス100本ノック」の生みの親はなぜ「3言語のサポート」と「Docker」にこだわったのか (1/2)：目指したのは初学者向けの「Kaggle」 - ＠IT

2020/09/17 18 users 傍ら Docker フリーランス 取締役CTO 生みの親

このデータサイエンス100本ノックの「生みの親」ともいえるのが、データ解析設計事務所の森谷和弘氏だ。同氏はフリーランスのデータサイエンティストとして活動する傍ら、データアナリティクスラボの取締役CTO（最高技術責任者）として、データサイエンティスト人材を一から育成して企業に派遣する事業に携わっている。 ... 続きを読む

Google Cloud、機械学習アプリ開発の苦痛を減らすノウハウを紹介：豊富なAPIや「AutoML」「Kaggle」など - ＠IT

2020/09/11 12 users AutoML API プロトタイプ開発 ノウハウ 概要

豊富なAPIや「AutoML」「Kaggle」など：Google Cloud、機械学習アプリ開発の苦痛を減らすノウハウを紹介 Google Cloudは2020年9月1日（米国時間）、機械学習モデルを利用したアプリケーション開発の苦痛を減らし、プロトタイプ開発を迅速に進める方法を公式ブログで紹介した。 概要は以下の通り。 トレーニング済みモデ... 続きを読む

IT未経験からMLエンジニアになるまでの2年半でやったこと - MLaaSS - Machine Learning as a Self-Satisfaction

2020/07/08 344 users TLDR 境遇 MLエンジニア 転職エントリ IT未経験

はじめに 自身の転職活動にあたり皆さんの転職エントリが非常に参考になったので、私も同じ境遇の方の参考になればと思い、書き残すことにしました。（ただ、本当に私と似た境遇の方にはなかなかリーチしづらい気がしていますが・・・） TLDR; 30歳でIT未経験からMLエンジニアに転職 約2年半独学で勉強（ほとんどkaggle... 続きを読む

データサイエンスはじめて1か月以内で参加したコンペで銀メダル(上位3%)とるまで！ - Qiita

2020/07/02 215 users Qiita input コンペ 参戦 銀メダル

はじめに データサイエンス・機械学習っておもしろそうだけど、どうやって勉強すすめたらいいんだろう？というところから2月に勉強をスタートし、勉強のinputだけではなく実践したいと思って3月にKaggleのコンペに参戦！ その結果がなんと、銀メダル (+上位3%)をとることができました！ この記事では、そんな自分の勉強... 続きを読む