実務において回帰分析を行うに当たっての注意点を改めて挙げてみる - 渋谷駅前で働くデータサイエンティストのブログ

2024/07/20 171 users データサイエンティスト 実務 渋谷駅前 注意点 ブログ

先日のことですが、以下のニュースが統計的学習モデル界隈で話題になっていました。 肝心の箇所が会員限定コンテンツなので簡潔にまとめると、従来モデルよりも説明変数に入れる海域の数を増やした上で、Lasso（L1正則化）回帰で多重共線性を抑えつつ汎化性能を高めるというアプローチを取った、というお話です*1。これ... 続きを読む

因果推論100本ノック(2)回帰分析

2023/04/11 7 users メールマーケティング Python 購買傾向 自作 ケース

はじめに 因果推論100本ノック（自作）11本目~20本目の問題とPythonのサンプルコードです． 問題の不備や内容の誤り等ありましたら，ご指摘いただけますと幸いです． 設定 メールマーケティングの効果を推定するケースについて考えます． 化粧品のEC販売にて，メディアの会員の中で購買傾向の弱いユーザーにキャンペーン... 続きを読む

統計学の基本が学べる初心者向けの無料講座 相関分析や回帰分析も | Ledge.ai

2021/12/26 10 users Ledge.ai 相関分析 JMOOC unsplash 推計

画像はUnsplashより 一般社団法人日本オープンオンライン教育推進協議会（JMOOC）はオンライン講座「統計学入門 2020」を開講している。講座開講期間は2022年3月31日まで。統計学の初学者を対象としている。 本講座では、統計学の考え方、標本分布の特性値の捉え方、母集団の分布の性質やそれを用いた推計や検定、それを... 続きを読む

データ分析やAI予測の基本中の基本「回帰分析」「最小二乗法」の基礎をPythonコードと図で理解する

2021/12/02 21 users 最小二乗法 Pythonコード AI予測 図版 基礎

データ分析やAI予測の基本中の基本「回帰分析」「最小二乗法」の基礎をPythonコードと図で理解する：「AI」エンジニアになるための「基礎数学」再入門（15） AIに欠かせない数学を、プログラミング言語Pythonを使って高校生の学習範囲から学び直す連載。今回は「回帰分析」「最小二乗法」について、図版とPythonコードを... 続きを読む

滋賀大学データサイエンス学部講師の講義が無料配信、回帰分析や判別分析を紹介する | Ledge.ai

2021/06/08 19 users Ledge.ai 准教授 講義 データサイエン 判別分析

滋賀大学データサイエンス学部は6月7日、放送大学のインターネット配信公開講座「データサイエンス革命（全6回）」に、滋賀大学データサイエンス学部 教授の和泉志津恵氏、滋賀大学データサイエンス学部 准教授 松井秀俊氏による講義を1コマずつ提供したと発表。無料会員登録は講座ページより。 「第1回 データサイエン... 続きを読む

［AI・機械学習の数学］偏微分の基本（意味と計算方法）を理解する：AI・機械学習の数学入門 - ＠IT

2020/07/14 13 users 偏微分 微分 数学 数学入門 関数

「偏微分」って何？　いかにも難しそうな名前だが、微分を理解していれば意外に簡単。前回までの知識を踏まえて、今回は偏微分の意味と計算方法を理解しよう。 連載目次 微分は関数が最小値を取るときのxの値を求めるために使えます。前回はその具体的な利用例として、最小二乗法による回帰分析を行う方法を紹介しました... 続きを読む

孫悟空の今後の戦闘力の伸びを回帰分析で予想したら想像を超えた - プロクラシスト

2017/05/10 60 users 孫悟空 イジメ プロクラシスト 理系ネタ 全力

2017 - 05 - 10 孫悟空の今後の戦闘力の伸びを回帰分析で予想したら想像を超えた 理系ネタを全力で Google+ Pocket スポンサーリンク こんにちは、ほけきよです！ 「私の戦闘力は53万です」 なんてもうミジンコ程度の戦闘力。学校のクラスならイジメの対象です。 現在放映中のアニメ『 ドラゴンボール超 (スーパー)』、キャラのインフレっぷりがのぶっ飛んでいて面白いです。 www.... 続きを読む

回帰分析②：線形回帰が使えないときに用いる高度な回帰分析方法 – 医療政策学×医療経済学

2016/09/09 276 users 線形回帰 医療政策学×医療経済学 最小二乗法 一方 計量経済学

生物統計を学んでいる人の中には、「結果変数が連続変数の時には線形回帰、二項変数（0と1など2つの値しか取らないもの）のときにはロジスティック回帰分析を使うべき」のように1対1対応のお作法のような形で教わった人も多いと思います。一方で、計量経済学で回帰分析を習った人の中には、「最小二乗法（Ordinary Least Square; OLS, = 線形回帰）はありとあらゆる場合に使えるベストな方法で... 続きを読む

Mackerelを使ったデプロイの仕組み 〜Reactio編〜 - Masteries

2015/12/22 27 users stanaka Masteries mackerel 最初

2015 - 12 - 21 Mackerelを使ったデプロイの仕組み 〜Reactio編〜 この記事は, Mackerel Advent Calendar 2015 の21日目の記事です. 昨日の記事は, @stanaka さんの 年末年始のディスク容量アラートを回帰分析で回避しよう でした. はじめに ...まず最初に, せっかくの機会なので自分とMackerelの関係(?)について書いておこ... 続きを読む

プリキュアで学ぶ統計学②　ぴかりんじゃんけんに不正はあったのか？ - プリキュアの数字ブログ

2015/11/23 24 users プリキュア 読み物 キュアピース 統計学 サザエさん

2015-11-23 プリキュアで学ぶ統計学②　ぴかりんじゃんけんに不正はあったのか？ 読み物 プリキュアで学ぶ統計学 Tweet Share on Tumblr 第１回はこちら プリキュアで学ぶ統計学①---パンプキン王国の回帰分析 えーと、　 プリキュアを知らない人には何を言っているのかわからないと思いますが、 かつて「キュアピース」と「サザエさん」は1年間じゃんけん対決をしていました。 （画... 続きを読む

回帰分析×競馬で金儲けができるのか。 - 実験スピリッツ

2015/11/21 23 users 金儲け 実験スピリッツ 競馬 勝因 劇中

2015-11-21 回帰分析×競馬で金儲けができるのか。 分析 スポーツ 先日、たまたま映画「男はつらいよ」を鑑賞しました。私はその劇中で寅さんが競馬で大勝している姿を目撃しました。勝因はなんと「馬が語りかけてきやがった」というものです。 なるほど、それでは本当に馬が語りかけてきて勝利を導いてくれるものなのか実践してみたいと思います。 データ分析でやってみる 本当に馬が喋ってくるはずがないのでデ... 続きを読む

プリキュアで学ぶ統計学①---パンプキン王国の回帰分析---【初心者向け】 - プリキュアの数字ブログ

2015/11/08 133 users 読み物 プリキュア プリンセスプリキュア 数値 統計学

2015-11-08 プリキュアで学ぶ統計学①---パンプキン王国の回帰分析---【初心者向け】 プリキュアで学ぶ統計学 読み物 Tweet Share on Tumblr Ｇｏ！プリンセスプリキュア　秋の映画 「Ｇｏ！プリンセスプリキュア Ｇｏ！Ｇｏ！！豪華３本立て！！！」の初動2日間の数値がでましたね。 2015年10月31日公開、初動2日間で、 動員11万8292人、興行収入1億2938万3... 続きを読む

Amazon Machine Learningを理解するために3つの方法で天気予測をしてみた（二項分類編） | ナレコムAWSレシピ

2015/06/15 96 users 天気予測 Amazon Machine Learning

今回は天候データをAmazon Machine Learningに流し込み3つの方法（二項分類、多項分類、回帰分析）で天気予測をしてみます。 記事の目的 記事の目的は以下の3つです。 ・もっとも簡単な機械学習サービスであるAmazon Machine Learningを理解する ・同一データに対して3つの方法を利用することで3つの違いを掴む ・機械学習に対する属性情報の重要性を掴む 同じデータを複... 続きを読む

時系列データを分散分析してしまった例：Taglibro de H：So-netブログ

2015/05/02 15 users 分散 So-netブログ マズ 時系列データ 集会

時系列データをそのまま回帰分析にかけるとマズいという話は、ことしの生態学会で久保さんがされたそうです（すいません、別の集会にいってました）。最近、時系列データを、時間を群にわりあてて分散分析しているという例をみてしまったので、どうなるのかやってみました。 下のようなコードです。状態Yはランダムウォークして、測定値Xは状態Yから、正規分布にしたがうばらつきをもって得られるとしています。 set.se... 続きを読む

ロジスティック回帰分析の結果のまとめ方 | Theoretical Sociology

2013/08/05 29 users Theoretical Sociology 自説 反論 結果

ロジスティック回帰分析の結果のまとめ方について私の考え方をまとめておく。通常の回帰分析やその他の線形モデルにも共通する部分も多いと思う。あらゆる分析結果のまとめ方に共通する大事な原則は、 必要な情報を記載し、不要な情報は削除すること。必要な情報とは読者が分析結果を吟味するうえで必要な情報ということであり、読者に自説の正しさをわかってもらい、反論を封じるために必要な情報ということでもある。 というこ... 続きを読む

Webデータ分析＆データサイエンスで役立つ統計学・機械学習系の分析手法10選 - 道玄坂で働くデータサイエンティストのブログ

2013/06/10 1092 users 道玄坂 データサイエンティスト SVM クラスタリング 統計学

主に自分向けのまとめという意味合いが強いんですが（笑）、僕が実際に2013年6月現在webデータ分析＆データサイエンスの実務でツール・ライブラリ・パッケージを利用しているものに限って、統計学・機械学習系の分析手法を10個挙げて紹介してみようと思います。 回帰分析 独立性の検定 主成分分析・因子分析 クラスタリング 決定木 / 回帰木 サポートベクターマシン(SVM) ロジスティック回帰 ランダムフ... 続きを読む

池田信夫と相関係数と45度線: ニュースの社会科学的な裏側

2013/03/23 19 users 相関係数 池田信夫 Smith フィリップス曲線 池田信夫氏

2013年3月24日日曜日 池田信夫と相関係数と45度線 Check Tweet 以前から経済評論家の池田信夫氏が統計学に疎いのでは無いかと言う指摘があって、その代表的な問題にSmith(2006)で指摘されていた以下のフィリップス曲線に関する説明がある（池田信夫 blog（旧館））。 ここでの池田氏の説明が意味不明な所が多々あり、先日の元官僚の高橋洋一氏の回帰分析を酷評する池田氏も他人の事は言え... 続きを読む

Python：回帰分析 : 分析技術とビジネスインテリジェンス

2012/08/19 62 users scikit-learn Orange ライブラリ 本来 調査

今回はPythonによる回帰分析（OLS：Ordinary Least Squares）の実施方法をまとめる。 まずは最小2乗法に基づく重回帰式の作成と結果表示方法を取り上げる。 ライブラリの使い分けについては調査のしやすさを優先しているが、回帰分析については統計モデルはOrange、予測モデルはscikit-learnでやろうかなと考えている。 本来はすべてを統一したいが、後者ライブラリは回帰分... 続きを読む