もう迷わない！効果検証のための因果推論手法のチートシート - Qiita

2023/12/05 17 users 因果推論 Qiita ハードル 手法 用語

効果検証においてABテストによる単純比較以上のことをやろうすると、因果推論の各種手法を用いることになります。しかし、因果推論は主義や用語などが統一されておらず、いつ何を使えばいいかが分からないというハードルがあります。 そんな因果推論の手法を整理し、初～中級者にとって学習・活用の見通しが立てやすいよ... 続きを読む

ABテストが難しい場合の施策効果の評価・推定方法

2023/03/22 360 users サイエンス統括本部 ヤフー 施策効果 推定方法 評価

こんにちは。サイエンス統括本部でデータ分析による社内サービスの課題解決支援をしている関口です。 ヤフーではたくさんのABテスト（※1）が常に行われており、サービス改善に活かされています。しかしながら実際には、さまざまな理由からABテストができないことがよくあります。本記事では、そのような場合にどのように... 続きを読む

「北欧、暮らしの道具店」のメルマガをABテストで改善した話｜Kurashicom Tech Blog｜note

2022/10/13 279 users Note 北欧 クラシコム 白木 UXリサーチ

こんにちは。デザイナーの白木です。 前回はクラシコムのUXリサーチについてお話しましたが、今回は「北欧、暮らしの道具店」のメルマガをABテストの手法を使って改善した話をしたいと思います。 「北欧、暮らしの道具店」通常のメルマガは商品紹介がメインですが、それとは別に当店のアプリを紹介するメルマガも配信し... 続きを読む

ABテストとは？タイミーでのABテスト事例紹介 - Timee Product Team Blog

2022/01/13 13 users PdM タイミー 補佐 データアナリスト 実験手法

はじめに プロダクトチームの克海です。PdMの補佐をしながらプロダクトのデータアナリストをしています。 本記事ではアプリでのABを始めようといしている方に向けてのABテストの実施の流れと事例についてまとめた記事になります。 ABテストとは？ ABテストとはランダム化比較試験ともいれる実験手法です。検証対象をラン... 続きを読む

効果検証初心者の落とし穴　〜メルマガ配信時刻最適化システムを例に〜 - エムスリーテックブログ

2020/07/16 11 users 落とし穴 エムスリーテックブログ tkanayama 金山

エンジニアリンググループ AIチーム 新卒2年目の金山 (@tkanayama_)です。 今回は、私が新卒1年目に開発を担当していたメルマガ配信時刻最適化システムの経験をベースにしながら、ABテストで得られたデータを用いて効果検証する際に注意すべき点を架空のストーリー形式でお届けします（ストーリー中に出てくる数字を含め... 続きを読む

楽天は現代の祭りであり、日本のアイデンティティである - NOW HERE

2020/02/13 12 users アイデンティティ 啖呵売 してん NOW HERE 祭り

楽天の通販ページはおそらく、日本人に染みついている口上芸、啖呵売の流れを組んでるんだろうなあ。 昔、楽天のえらい人に「楽天の通販ページはなんであんなにゴチャゴチャしてんの？」って聞いたら「ABテストを死ぬほど繰り返しても、結局ああいうスタイルの売上が一番高い」って言われたの思い出すな。 もちろん、そ... 続きを読む

ヨッピー on Twitter: "昔、楽天のえらい人に「楽天の通販ページはなんであんなにゴチャゴチャしてんの？」って聞いたら「ABテストを死ぬほど繰り返しても、結局ああいうスタイルの売上が

2020/02/12 788 users してん ヨッピー on Twitter https エライ人

昔、楽天のえらい人に「楽天の通販ページはなんであんなにゴチャゴチャしてんの？」って聞いたら「ABテストを死ぬほど繰り返しても、結局ああいうスタイルの売上が一番高い」って言われたの思い出すな。 もちろん、そういうページを好きな人が楽… https://t.co/c4lxBgtSHS 続きを読む

ASOの情報収集は？ABテストのやり方は？アプリのASO実務担当者５名が回答するトークセッション開催｜モバイルマーケティング研究所｜モジュールアップス

2019/11/07 11 users ASO Repro モバイルマーケティング研究所 成果 アプリ

ASO実務担当者５名をお招きしてトークセッションを開催。アプリの新規ユーザー獲得において押さえるポイントについて質問が寄せられた。ASOの情報収集の方法、どんなASOを使っているか、ABテストの方法は、成果の追い方などの質問が寄せられ、担当者は丁寧に回答した。 本記事は、Reproが主催する「aCrew for User Acqui... 続きを読む

１年間で約２倍の効果！finbeeアプリが実践したASO施策。キーワードやタイトルの調整方法とは？｜モバイルマーケティング研究所｜モジュールアップス

2019/10/30 12 users ASO施策 モバイルマーケティング研究所 Repro 効果

いつの間にか貯金できる自動貯金アプリ「finbee」のASO事例。半年間および１年間で、どのようにキーワードを最適化し、タイトルやサブタイトルを調整し、スクリーンショットのABテストを行ったのか、具体例を交えながら解説した。 本記事は、Reproが主催する「aCrew for User Acquisition ～GYAO,ママリ,finbeeのASO施策... 続きを読む

LPOとかABテストの運営、管理方法｜タカハシ フミト 美容マーケター｜note

2019/09/02 16 users LPO たかはし 運営 管理方法

こんにちは。BULK HOMMEの高橋です。 前回のLPの作り方のnoteがいいねやスキをもらえてとても嬉しかったです。 必要な方々に、刺さる内容を考えて、これからもお役に立てそうな情報をアップしていく活力になりました。反応をくれた皆様、誠にありがとうございました。 もっと細かく知りたい。とかここが意味わからん！と... 続きを読む

デザイナーが1人でABテストを回してWEBの直帰率を10%以上改善した話 - AppBrew Tech Blog

2019/05/16 66 users デザイナー 直帰率 AppBrew tech blog 西山

こんにちは！去年の10月からAppBrewでUIUXデザイナーをしている 西山(@Fav_KudasaiTT) です。普段は事業の数値を改善させるため、LIPS WEBのデザイン改善したりコード書いたりディレクションしたりしています。 事業の数値を改善させると言っても、取り組むべき課題を見つけその課題に対して精度の高い仮説を立てて検証... 続きを読む

Gunosyでの仮説検証 - Gunosy Tech Blog

2018/09/20 70 users Gunosy ルクラ skozawa LUCRA 仮説検証

こんにちは、メディア事業本部のエンジニアの id:skozawa です。 普段の業務では、女性向けキュレーションサービス LUCRA（ルクラ）のデータ分析やロジック開発をしています。 lucra.jp 先日行われたData Driven Developer Meetup #1で仮説検証とABテストについてLTをしてきたので、その内容について簡単に書きたいと思... 続きを読む

健康アップデートでアフィリエイトの売上が壊滅。今後の身の振り方を考えた

2017/12/25 26 users 壊滅 メインサイト アフィリエイト Google ヒートマップ

12月6日頃に起きたgoogleの健康アップデート。うちが運営していたサプリの比較サイトも落ちました。 あれから約3週間たったわけですが、今のところかすかな光も見えてきません。 うちのサイトしっかり吹っ飛びました 一番注力してたメインサイトはこの通り。 ここ半年ほどで狙ってたワードで上位表示することができ、これからヒートマップやABテストでサイト内を改善していきながら、さらなる売上アップを計画して... 続きを読む

グロースとは学びを得ること - 後編｜Go Ando｜note

2017/12/07 85 users クロース goando THE GUILD 後編 動向

こんにちは、THE GUILDの @goando です。 「 グロースとは学びを得ること - 前編 」の続きです。 後編ではグロースにおけるABテストの価値について、グロースに取り組む中で得た気付きと世界の動向をご紹介します。 正しいABテスト 多くの方がご存知のABテストですが、時折見かけるのが「 改善案Aと改善案Bの方法のどちらがより良い結果に繋がるかを検証 」するための方法として利用し、更に... 続きを読む

悪用厳禁：絶対に成功するA/Bテストの作り方 – ところてん – Medium

2017/10/29 1151 users 本題 一目 即座 施策 ところてん

なぜA/Bテストをするのか さて本題です。なぜA/Bテストをするのでしょうか。大きな目的は以下の二つでしょうか。 様々な施策を実施し、より良いものを選択する 新しい施策を実施する際に、悪い結果(トラブル等を含む)が出たら即座に中止できるようにする これに加えて、ABテストは効果が一目でわかるため、施策内容を理解していない人であっても「これは良い」と判断することができる、という特徴があります。 これ... 続きを読む

弊社の失敗から学ぶ『成功するＡＢテスト』の実施方法 | FULL KAITEN BLOG

2017/05/19 13 users びちゅ 経緯 べびちゅ クーポン施策 ベビー服EC

『ＡＢテストを実施したけれど、良かったのか悪かったのかよくわからない』 そんなことってよくありますよね？ ベビー服EC『べびちゅ』 でも『結果を見ても、よく分からない』といったことが、よくあります。 でも今回の失敗はもっとひどいです。『結果自体』が出なかったんです・・・。 まず、今回のテストの経緯を話しますね。 べびちゅでは、数多くのクーポン施策のテストを行ってきました。 その結果、『 値引き額固... 続きを読む

A/Bテストに用いられる統計的検定手法（ロジック）のまとめ＆比較 | RCO Ad-Tech Lab Blog

2017/04/25 460 users ロジック RCO Ad-Tech Lab Blog 堅物

汎用人型雑用AIの stakaya です。 たまたま数年前に社内のBLOGに書いたABテストのロジックのまとめ＆比較記事を発掘したので、 このまま眠らせているのはもったいないぞと、 圧倒的もったいない精神を発揮し、シェアさせていただきます。 あの頃は私も若かった。 社内では”堅物・真面目・一途”で有名なものでして、下記文章がお硬いのはご勘弁ください。 はじめに 本記事は、施策の評価手法としてしばし... 続きを読む

［ウェブサービスレビュー］ウェブサイトの読み込み速度を比較--「Which loads faster？」 - CNET Japan

2017/04/15 17 users ウェブページ ウェブサービスレビュー 速度 ウェブサイト 用途

内容： 「Which loads faster？」は、2つのウェブページを同時に読み込み、表示が完了するまでの速度差を測定できるサービスだ。難しい設定もなく、URLを入れてボタンを押すだけで測定できるので、競合サイトとの比較や、ABテストなどの用途で手軽に使用できる。 「Which loads faster？」は、2つのウェブページを同時に読み込み、表示が完了するまでの速度差を測定できるサービスだ... 続きを読む

Google Optimize beta でウェブサイトの改善【無料 A/Bテスト】 - ウェブと食べ物と趣味のこと

2017/04/11 20 users ウェブ ウェブサイト 食べ物 Bテスト 趣味

2017 - 04 - 11 Google Optimize beta でウェブサイトの改善【無料 A/Bテスト】 ウェブサービス サイト運営 シェアする Twitter Pocket 半月ほど前にGoogleから「Google Optimize」なるサービスのメールが届きました。 Google Analyticsのデータを利用して簡易的なABテストなどが出来る サービスのようです。早速登録してみ... 続きを読む

ABテストやってる？という問いかけと事例 // Speaker Deck

2017/03/31 14 users Speaker Deck 事例

All slide content and descriptions are owned by their creators. 続きを読む

ランディングページをサクサク改善できる、正しいABテストの方法を解説！ | MarkeTimes（マーケタイムズ）

2017/02/27 16 users 一部分 MarkeTimes 反応 正しい判断 マーケタイムズ

売上を伸ばすには、ランディングページ改善が必要不可欠 あなたはランディングページの改善のために何か行っていますか？ 多くの人がページ改善のために行うのが、オリジナルページと、ページの一部分を変えたもう1パターンのページを使って、ユーザーの反応を見るABテストです。しかし、そんな人の話を聞いていると、方法が間違っているために正しい判断が出来ていないケースも多々見受けられます。 そこで今回は、【効果的... 続きを読む

golangでABテストの振る舞いを実装する - at kaneshin

2017/02/22 24 users golang struct USER at kaneshin

2017 - 02 - 18 golangでABテストの振る舞いを実装する Golang golangに限らないんですが、ABテストの振る舞いをちゃんとした設計のもと実装するのって難しいと思っています。 よくあるパターンとしては、Userという構造体があって、それに対してABテストによる振る舞いを変えるように実装をすることかと思います。 User type User struct { ID int... 続きを読む

【エロvsインパクト】アドセンスを犠牲にして1ヶ月間のABテストをします - いつまでもアフタースクール

2017/02/14 21 users Facebook アフタースクール bookmark 二度

2017 - 02 - 14 【エロvsインパクト】アドセンスを犠牲にして1ヶ月間のABテストをします 飽くなき探究心 人気な３記事はコチラ！ 18歳で起業したぼくが二度と起こさないと誓ったひとつの失敗 給料が低くて悩むなら年収1000万越えの求人を見てみない？ プログラミングスクールおすすめ17選を徹底比較！初心者を絶対悩ませない料金・内容まとめ シェアする Bookmark! Facebook... 続きを読む

ABテストの対象をいい感じに割り振る方法 - Gunosyデータ分析ブログ

2017/02/08 77 users Gunosyデータ分析ブログ Gunosy 対象 石塚 方法

2017 - 02 - 08 ABテストの対象をいい感じに割り振る方法 Python 分析基盤 分析ノウハウ ABテスト こんにちは、データ分析部の石塚 ( @ij_spitz ) です。 最近聴いている曲は久保田利伸さんのLA・LA・LA LOVE SONGです。 ロンバケ最高でした、月曜９時はOLが街から消えるというのも納得です。 Gunosyではプロダクト改善のためにABテストを用いて意思決... 続きを読む

無料で使えるサイト分析・改善ツール「Juicer」を導入してみた | 雰囲気で話す

2017/02/03 17 users juicer ユウセイ Webマーケター ライター 属性別

Webサイトの分析と改善提案してくれる無料ツール「Juicer」を使ってみました。アクセス解析がわかりやすく、ABテストや属性別の表示切り替えも実行できます。すべて無料で使えるので試してみて損はないと思います。ども、最近はWebマーケター寄りのお仕事が増えてきたライターのゆうせいです。ブログにはアクセス解析ツールとしてGoogleアナリティクスを導入していますが、もう少し手軽で簡単に分析と改善がで... 続きを読む