もう迷わない！効果検証のための因果推論手法のチートシート - Qiita

2023/12/05 17 users 因果推論 Qiita ハードル 手法 用語

効果検証においてABテストによる単純比較以上のことをやろうすると、因果推論の各種手法を用いることになります。しかし、因果推論は主義や用語などが統一されておらず、いつ何を使えばいいかが分からないというハードルがあります。 そんな因果推論の手法を整理し、初～中級者にとって学習・活用の見通しが立てやすいよ... 続きを読む

ABテストの結果よりも大事なたった一つのこと - Uzabase for Engineers

2023/07/04 5 users Uzabase for Engineers 結果

こんにちは。NewsPicks App Reader Experience Unit でエンジニアしている青木です。 NewsPicks では日々のサービス改善において AB テストを数多く実施しています。 施策毎に AB テストを柔軟に実施できるのは過去紹介した AB テスト基盤があってこそです。 https://tech.uzabase.com/entry/2022/12/25/183334 App Read... 続きを読む

ABテストが難しい場合の施策効果の評価・推定方法

2023/03/22 360 users サイエンス統括本部 ヤフー 施策効果 推定方法 評価

こんにちは。サイエンス統括本部でデータ分析による社内サービスの課題解決支援をしている関口です。 ヤフーではたくさんのABテスト（※1）が常に行われており、サービス改善に活かされています。しかしながら実際には、さまざまな理由からABテストができないことがよくあります。本記事では、そのような場合にどのように... 続きを読む

Laravel 10🐿がリリースされたのだ🎉【Laravel 10 新機能】 - Qiita

2023/02/14 9 users Qiita define match Laravel void

Laravel 10がきました！ぺちぱーとララベラー歓喜！新機能を紹介します Laravel ぺなんと if文なしで実行する処理を切り替えることができ、ABテストで便利です public function boot(): void { Feature::define('beta-testers', fn (User $user) => match (true) { $user->isBetaTester() => true, default => false, })... 続きを読む

「北欧、暮らしの道具店」のメルマガをABテストで改善した話｜Kurashicom Tech Blog｜note

2022/10/13 279 users Note 北欧 クラシコム 白木 UXリサーチ

こんにちは。デザイナーの白木です。 前回はクラシコムのUXリサーチについてお話しましたが、今回は「北欧、暮らしの道具店」のメルマガをABテストの手法を使って改善した話をしたいと思います。 「北欧、暮らしの道具店」通常のメルマガは商品紹介がメインですが、それとは別に当店のアプリを紹介するメルマガも配信し... 続きを読む

ABテストとは？タイミーでのABテスト事例紹介 - Timee Product Team Blog

2022/01/13 13 users PdM タイミー 補佐 データアナリスト 実験手法

はじめに プロダクトチームの克海です。PdMの補佐をしながらプロダクトのデータアナリストをしています。 本記事ではアプリでのABを始めようといしている方に向けてのABテストの実施の流れと事例についてまとめた記事になります。 ABテストとは？ ABテストとはランダム化比較試験ともいれる実験手法です。検証対象をラン... 続きを読む

見栄えのデザインから“戦略のデザイン”へ　nanocolor川端氏が考える、利益が上がるLPの最適解 (1/3)：MarkeZine（マーケジン）

2020/07/17 5 users ヒジ MarkeZine Note マーケジン 反響

バナー広告やLPはこれまで、短期的な売上の獲得を狙って制作されてきた。しかし、ただのビジュアル違いのABテストで成果を高めるのも、そろそろ限界に差し掛かっているのではないだろうか。そんな折、BtoC領域のLP制作に強みを持つnanocolor代表の川端康介氏が執筆したnoteの記事が反響を呼んだ。デザイン論ではなくビジ... 続きを読む

効果検証初心者の落とし穴　〜メルマガ配信時刻最適化システムを例に〜 - エムスリーテックブログ

2020/07/16 11 users 落とし穴 エムスリーテックブログ tkanayama 金山

エンジニアリンググループ AIチーム 新卒2年目の金山 (@tkanayama_)です。 今回は、私が新卒1年目に開発を担当していたメルマガ配信時刻最適化システムの経験をベースにしながら、ABテストで得られたデータを用いて効果検証する際に注意すべき点を架空のストーリー形式でお届けします（ストーリー中に出てくる数字を含め... 続きを読む

楽天は現代の祭りであり、日本のアイデンティティである - NOW HERE

2020/02/13 12 users アイデンティティ 啖呵売 してん NOW HERE 祭り

楽天の通販ページはおそらく、日本人に染みついている口上芸、啖呵売の流れを組んでるんだろうなあ。 昔、楽天のえらい人に「楽天の通販ページはなんであんなにゴチャゴチャしてんの？」って聞いたら「ABテストを死ぬほど繰り返しても、結局ああいうスタイルの売上が一番高い」って言われたの思い出すな。 もちろん、そ... 続きを読む

ヨッピー on Twitter: "昔、楽天のえらい人に「楽天の通販ページはなんであんなにゴチャゴチャしてんの？」って聞いたら「ABテストを死ぬほど繰り返しても、結局ああいうスタイルの売上が

2020/02/12 788 users してん ヨッピー on Twitter https エライ人

昔、楽天のえらい人に「楽天の通販ページはなんであんなにゴチャゴチャしてんの？」って聞いたら「ABテストを死ぬほど繰り返しても、結局ああいうスタイルの売上が一番高い」って言われたの思い出すな。 もちろん、そういうページを好きな人が楽… https://t.co/c4lxBgtSHS 続きを読む

ASOの情報収集は？ABテストのやり方は？アプリのASO実務担当者５名が回答するトークセッション開催｜モバイルマーケティング研究所｜モジュールアップス

2019/11/07 11 users ASO Repro モバイルマーケティング研究所 成果 アプリ

ASO実務担当者５名をお招きしてトークセッションを開催。アプリの新規ユーザー獲得において押さえるポイントについて質問が寄せられた。ASOの情報収集の方法、どんなASOを使っているか、ABテストの方法は、成果の追い方などの質問が寄せられ、担当者は丁寧に回答した。 本記事は、Reproが主催する「aCrew for User Acqui... 続きを読む

１年間で約２倍の効果！finbeeアプリが実践したASO施策。キーワードやタイトルの調整方法とは？｜モバイルマーケティング研究所｜モジュールアップス

2019/10/30 12 users ASO施策 モバイルマーケティング研究所 Repro 効果

いつの間にか貯金できる自動貯金アプリ「finbee」のASO事例。半年間および１年間で、どのようにキーワードを最適化し、タイトルやサブタイトルを調整し、スクリーンショットのABテストを行ったのか、具体例を交えながら解説した。 本記事は、Reproが主催する「aCrew for User Acquisition ～GYAO,ママリ,finbeeのASO施策... 続きを読む

LPOとかABテストの運営、管理方法｜タカハシ フミト 美容マーケター｜note

2019/09/02 16 users LPO たかはし 運営 管理方法

こんにちは。BULK HOMMEの高橋です。 前回のLPの作り方のnoteがいいねやスキをもらえてとても嬉しかったです。 必要な方々に、刺さる内容を考えて、これからもお役に立てそうな情報をアップしていく活力になりました。反応をくれた皆様、誠にありがとうございました。 もっと細かく知りたい。とかここが意味わからん！と... 続きを読む

デザイナーが1人でABテストを回してWEBの直帰率を10%以上改善した話 - AppBrew Tech Blog

2019/05/16 66 users デザイナー 直帰率 AppBrew tech blog 西山

こんにちは！去年の10月からAppBrewでUIUXデザイナーをしている 西山(@Fav_KudasaiTT) です。普段は事業の数値を改善させるため、LIPS WEBのデザイン改善したりコード書いたりディレクションしたりしています。 事業の数値を改善させると言っても、取り組むべき課題を見つけその課題に対して精度の高い仮説を立てて検証... 続きを読む

Gunosyでの仮説検証 - Gunosy Tech Blog

2018/09/20 70 users Gunosy ルクラ skozawa LUCRA 仮説検証

こんにちは、メディア事業本部のエンジニアの id:skozawa です。 普段の業務では、女性向けキュレーションサービス LUCRA（ルクラ）のデータ分析やロジック開発をしています。 lucra.jp 先日行われたData Driven Developer Meetup #1で仮説検証とABテストについてLTをしてきたので、その内容について簡単に書きたいと思... 続きを読む

健康アップデートでアフィリエイトの売上が壊滅。今後の身の振り方を考えた

2017/12/25 26 users 壊滅 メインサイト アフィリエイト Google ヒートマップ

12月6日頃に起きたgoogleの健康アップデート。うちが運営していたサプリの比較サイトも落ちました。 あれから約3週間たったわけですが、今のところかすかな光も見えてきません。 うちのサイトしっかり吹っ飛びました 一番注力してたメインサイトはこの通り。 ここ半年ほどで狙ってたワードで上位表示することができ、これからヒートマップやABテストでサイト内を改善していきながら、さらなる売上アップを計画して... 続きを読む

グロースとは学びを得ること - 後編｜Go Ando｜note

2017/12/07 85 users クロース goando THE GUILD 後編 動向

こんにちは、THE GUILDの @goando です。 「 グロースとは学びを得ること - 前編 」の続きです。 後編ではグロースにおけるABテストの価値について、グロースに取り組む中で得た気付きと世界の動向をご紹介します。 正しいABテスト 多くの方がご存知のABテストですが、時折見かけるのが「 改善案Aと改善案Bの方法のどちらがより良い結果に繋がるかを検証 」するための方法として利用し、更に... 続きを読む

悪用厳禁：絶対に成功するA/Bテストの作り方 – ところてん – Medium

2017/10/29 1151 users 本題 一目 即座 施策 ところてん

なぜA/Bテストをするのか さて本題です。なぜA/Bテストをするのでしょうか。大きな目的は以下の二つでしょうか。 様々な施策を実施し、より良いものを選択する 新しい施策を実施する際に、悪い結果(トラブル等を含む)が出たら即座に中止できるようにする これに加えて、ABテストは効果が一目でわかるため、施策内容を理解していない人であっても「これは良い」と判断することができる、という特徴があります。 これ... 続きを読む

メルマガで成果の出る『セグメント』の見つけ方 | FULL KAITEN BLOG

2017/05/22 9 users セグメント セグメント配信 一斉配信 成果 メルマガ

以前、 『 あなたのメルマガは、一斉配信？それともセグメント配信？ 』で、 『簡単なセグメント配信の始め方』について説明しました。 しかしながら、 『成果の出るセグメントをどうやって見つけたらいいか分からない！』 という理由で、お困りの方が結構いらっしゃるということを知りました。 そこで今回は、 ＡＢテストを行わずに『成果の出るセグメントを簡単に見つける方法』 について、ご紹介したいと思います。 ... 続きを読む

弊社の失敗から学ぶ『成功するＡＢテスト』の実施方法 | FULL KAITEN BLOG

2017/05/19 13 users びちゅ 経緯 べびちゅ クーポン施策 ベビー服EC

『ＡＢテストを実施したけれど、良かったのか悪かったのかよくわからない』 そんなことってよくありますよね？ ベビー服EC『べびちゅ』 でも『結果を見ても、よく分からない』といったことが、よくあります。 でも今回の失敗はもっとひどいです。『結果自体』が出なかったんです・・・。 まず、今回のテストの経緯を話しますね。 べびちゅでは、数多くのクーポン施策のテストを行ってきました。 その結果、『 値引き額固... 続きを読む

A/Bテストに用いられる統計的検定手法（ロジック）のまとめ＆比較 | RCO Ad-Tech Lab Blog

2017/04/25 460 users ロジック RCO Ad-Tech Lab Blog 堅物

汎用人型雑用AIの stakaya です。 たまたま数年前に社内のBLOGに書いたABテストのロジックのまとめ＆比較記事を発掘したので、 このまま眠らせているのはもったいないぞと、 圧倒的もったいない精神を発揮し、シェアさせていただきます。 あの頃は私も若かった。 社内では”堅物・真面目・一途”で有名なものでして、下記文章がお硬いのはご勘弁ください。 はじめに 本記事は、施策の評価手法としてしばし... 続きを読む

［ウェブサービスレビュー］ウェブサイトの読み込み速度を比較--「Which loads faster？」 - CNET Japan

2017/04/15 17 users ウェブページ ウェブサービスレビュー 速度 ウェブサイト 用途

内容： 「Which loads faster？」は、2つのウェブページを同時に読み込み、表示が完了するまでの速度差を測定できるサービスだ。難しい設定もなく、URLを入れてボタンを押すだけで測定できるので、競合サイトとの比較や、ABテストなどの用途で手軽に使用できる。 「Which loads faster？」は、2つのウェブページを同時に読み込み、表示が完了するまでの速度差を測定できるサービスだ... 続きを読む

Google Optimize beta でウェブサイトの改善【無料 A/Bテスト】 - ウェブと食べ物と趣味のこと

2017/04/11 20 users ウェブ ウェブサイト 食べ物 Bテスト 趣味

2017 - 04 - 11 Google Optimize beta でウェブサイトの改善【無料 A/Bテスト】 ウェブサービス サイト運営 シェアする Twitter Pocket 半月ほど前にGoogleから「Google Optimize」なるサービスのメールが届きました。 Google Analyticsのデータを利用して簡易的なABテストなどが出来る サービスのようです。早速登録してみ... 続きを読む

ABテストやってる？という問いかけと事例 // Speaker Deck

2017/03/31 14 users Speaker Deck 事例

All slide content and descriptions are owned by their creators. 続きを読む

ランディングページをサクサク改善できる、正しいABテストの方法を解説！ | MarkeTimes（マーケタイムズ）

2017/02/27 16 users 一部分 MarkeTimes 反応 正しい判断 マーケタイムズ

売上を伸ばすには、ランディングページ改善が必要不可欠 あなたはランディングページの改善のために何か行っていますか？ 多くの人がページ改善のために行うのが、オリジナルページと、ページの一部分を変えたもう1パターンのページを使って、ユーザーの反応を見るABテストです。しかし、そんな人の話を聞いていると、方法が間違っているために正しい判断が出来ていないケースも多々見受けられます。 そこで今回は、【効果的... 続きを読む