ゲームにおけるA/Bテストについて - KAYAC engineers' blog

2023/02/13 147 users KAYAC engineers 察し 代物 媒体 容量

こんにちは。技術部平山です。 今回は、ゲームにおけるA/Bテスト について論じます。 「論じます」で始めたことで察しがつくかとも思いますが、今回はブログではありません。 媒体はブログですが、ブログの容量ではない代物になっております。3.5万字(115KB)超えです。 ゲームにおけるA/Bテストについて、実施の方法や問... 続きを読む

リリース手法多すぎﾜﾛﾀｧ　B/G、カナリア、機能フラグ、ダークローンチ、A/Bテスト、、など - Qiita

2022/06/28 282 users Qiita カナリア SRE 台頭 アジャイル開発

この記事でCloudWatch Evidentlyについて調べていると、「機能フラグ」や「A/Bテスト」などインフラエンジニアには若干聞き慣れないリリース用語が出てきました。 アジャイル開発やCI/CDの台頭に伴い多数出現したこれらのリリース戦略用語をまとめて整理してみることにします。 インフラエンジニアやSREと呼ばれるロール... 続きを読む

「画像検索はここまで来たのか」とすさまじさを実感するAdobeのAI「Adobe Sensei」の秘密を開発者が解説 - GIGAZINE

2019/11/15 60 users Photoshop Booking.com 人工知能 近年

近年はソフトウェア開発の場の多くで人工知能(AI)が利用されており、その活用の場は1日1000個のA/Bテストを行う「Booking.com」や配車アプリLyftのマーケティングを自動化までさまざまです。Photoshopの開発元であるAdobeのAI「Adobe Sensei」も機械学習を利用していますが、「他とは違う独特のデータ」を持っているがゆ... 続きを読む

WebサービスのA/Bテストや機械学習でよく使う「確率分布」18種を解説 - paiza開発日誌

2019/10/16 643 users paiza開発日誌 確率分布 機械学習 Twitter 解説

主な確率分布の関連図 こんにちは、吉岡([twitter:@yoshiokatsuneo])です。 Webサービスを運営していると、利用状況を分析・予測したり、A/Bテストなどで検証したりすることがよくあります。 データを一個一個見ていてもよくわからないので、データ全体や、その背景の傾向などがまとめて見られると便利ですよね。そんな... 続きを読む

A/Bテストのベストプラクティスと落とし穴 ~KDD2019 レポート~ - Gunosyデータ分析ブログ

2019/10/03 120 users ベストプラクティス 落とし穴 Gunosyデータ分析ブログ

はじめに 研究開発チームの関です。古川未鈴さんの結婚、ニジマス大門果琳さんの卒業、uijinの解散とアイドル業界も激動の秋を迎えていますね。 2019年8月4日から5日間、アメリカはアラスカ州アンカレッジで開催されたデータマイニング領域のトップカンファレンスであるKDD2019にGunosyから北田と関が参加・発表してきま... 続きを読む

今求められるSEOとは？ 検索ユーザーの評価を高めるA/Bテストのススメ | MozCon2019レポート | Mozcon | Web担当者Forum

2019/10/01 69 users デジタルマ Mozcon 小手先 立案 SEO施策

小手先のSEOでどうにかなる時代は10年前に終わった。 現在の検索結果は、かつてのようなマークアップやキーワードなどの影響力は弱まり、「ユーザーによるページへの満足度」の影響力が強まっていると言われている。その変化に合わせたSEO施策の立案・実行プロセスはどうあるべきか。 ロンドン他に拠点を持つデジタルマ... 続きを読む

A/Bテストよりすごい？はじめてのインターリービング - Gunosyデータ分析ブログ

2018/10/14 413 users LUCRA パーソナライズ 飯塚 趣向 アプリケーション

はじめに こんにちは。メディアデータ分析部の飯塚(@zr_4)です。 弊社では現在、複数のニュース形式のアプリケーションを運用しており、各プロダクトでユーザーの趣向にあうような記事リストのパーソナライズを行っています。 左から：LUCRA、ニュースパス、グノシー そのため、記事のランキングに関するA/Bテストをする... 続きを読む

エンジニアを魅了する次世代 BI ツール『Looker』を Quipper が導入した理由（わけ） - Quipper Product Team Blog

2018/06/04 164 users Looker Quipper わけ 負債 マネージャー

2018 - 06 - 04 エンジニアを魅了する次世代 BI ツール『Looker』を Quipper が導入した理由（わけ） こんにちは、データグループのマネージャーをやっています beniyama と申します。 先の記事 『プロダクトの「負債」を「機能」と呼び直す 〜A/Bテストを用いた"価値"の定量化〜』 でも触れられていますが、データグループではデータ分析基盤の構築（ 参考資料 ）からデ... 続きを読む

プロダクトの「負債」を「機能」と呼び直す 〜A/Bテストを用いた"価値"の定量化〜 - Quipper Product Team Blog

2018/05/31 140 users 負債 定量化 Quipper ohbarye プロダクト

2018 - 05 - 31 プロダクトの「負債」を「機能」と呼び直す 〜A/Bテストを用いた"価値"の定量化〜 Quipper で Web Engineer 兼 Engineering Manager を務める @ohbarye です。スタディサプリの開発、その中でも特に 合格特訓コース や決済周りの機能開発・保守が主な業務です。 弊社が開発するプロダクト「 スタディサプリ 」ではA/Bテストを... 続きを読む

悪用厳禁：絶対に成功するA/Bテストの作り方 – ところてん – Medium

2017/10/29 1151 users 本題 一目 即座 施策 ABテスト

なぜA/Bテストをするのか さて本題です。なぜA/Bテストをするのでしょうか。大きな目的は以下の二つでしょうか。 様々な施策を実施し、より良いものを選択する 新しい施策を実施する際に、悪い結果(トラブル等を含む)が出たら即座に中止できるようにする これに加えて、ABテストは効果が一目でわかるため、施策内容を理解していない人であっても「これは良い」と判断することができる、という特徴があります。 これ... 続きを読む

Backlogの改善でわかった A/Bテスト を失敗に導くアンチパターン5選 | ヌーラボ

2017/07/12 91 users Backlog 砂川 トラッキング ヌーラボ 定量化

こんにちは。ヌーラボの砂川です。ヌーラボのプロジェクト管理サービス「 Backlog 」のグロースハックチームとして働いています。さて、外から仕事内容が見えにくいこのグロースハックチーム。一体どのような仕事をしているかというと、 Backlog がどのように使われているかを、トラッキングや様々な A/Bテスト 等を通じて定量化・定性化し、ユーザー体験の改善に役立てる活動をしています。 簡単に言うと... 続きを読む

A/Bテストに用いられる統計的検定手法（ロジック）のまとめ＆比較 | RCO Ad-Tech Lab Blog

2017/04/25 460 users ロジック RCO Ad-Tech Lab Blog 堅物

汎用人型雑用AIの stakaya です。 たまたま数年前に社内のBLOGに書いたABテストのロジックのまとめ＆比較記事を発掘したので、 このまま眠らせているのはもったいないぞと、 圧倒的もったいない精神を発揮し、シェアさせていただきます。 あの頃は私も若かった。 社内では”堅物・真面目・一途”で有名なものでして、下記文章がお硬いのはご勘弁ください。 はじめに 本記事は、施策の評価手法としてしばし... 続きを読む

Kaizen Platformの技術の大変革 ✨ 大規模トラフィックと高性能配信への転換 | Kaizen Platform's Blog

2017/03/10 51 users Kaizen Platform 大規模トラフィック 転換

アプリケーションエンジニアのkuです。 Kaizen Platformは、経験豊富なグロースハッカーのネットワークを活かしてより少ない手間でA/Bテストを提供するサービスから始まって4年になりました。現在では古典的なA/Bテストに加えて、 広告 をはじめに様々な改善手法をクリエイティブとセットで提供しています。 様々な手段を提供する一方で、基盤となるアーキテクチャは4年前の創業時に開発したものを使... 続きを読む

バナー改善に必要なA/Bテストの基礎知識～検証方法と具体的な改善ポイント | nex8ブログ

2016/12/27 282 users nex8ブログ 指標 基礎知識 検証方法 nex8事業部

広告バナーを改善し、費用対効果を向上させるために必要な基礎知識と、検証方法、具体的な改善ポイントを説明しています。こんにちは。nex8事業部の脇本です。 今回私がお話しするのは、広告バナーの効果検証について。 ディスプレイ広告においては、効果検証を繰り返す事でより費用対効果のよい広告バナーを見つけていくことが重要です。 しかし何を指標とすればよいのか、検証期間はどれくらいがよいのか、変更するならど... 続きを読む

ケーススタディ：NetflixはどのようにA/Bテストを実施しているのか？ | UX MILK

2016/11/21 73 users ケーススタディ Netflix 著者 彼ら B testing

この記事はuxdesign.ccからの翻訳転載です。配信元または著者の許可を得て配信しています。 uxdesign.cc - How Netflix does A/B Testing (2016-07-26) Netflixはどうやって素晴らしいストリーミング体験を提供しているのでしょうか？　彼らがどのようにサイトを作り、さらにA/Bテストを通してどのようにUIの改善をしているのでしょうか？ この... 続きを読む

Google無双が止まらない。GA連携型A/Bテストツール『Google Optimize (beta)』無償版開放へ - BITA デジマラボ

2016/09/30 622 users BITA beta デジマラボ TOP Techニュース 無料

Google無双が止まらない。GA連携型A/Bテストツール『Google Optimize (beta)』無償版開放へ TOP Techニュース Google無双が止まらない。GA連携型A/Bテストツール『Google Optimize (beta)』無償版開放へ Google Analytics「次はA/Bテストを無料にする」 はい。またしても唐突な無償版発表です。 つい先日、AIによる指標指示... 続きを読む

シリコンバレーのIT企業が利用しているA/Bテスト手法まとめ - データ分析エンジニアのブログ

2016/04/18 719 users シリコンバレー 一方 有効 データ分析エンジニア 修正

いま注目すべき シリコンバレー の有名なIT企業は新規のデザインや機能が有効かどうかを検証するためにA/Bテストを行っています。 その一方で、日本の企業も含め、A/Bテストを本番環境で導入している企業は非常に少ないです。 加えて、日本で言われているA/Bテストと海外で言われているA/Bテストは少々異なるものだと感じています。 日本のA/Bテストはフォームの最適化やデザインの修正にとどまっている一方... 続きを読む

編集者がテクノロジーに出会うとき、見出しはどう変わる？～A/Bテストで見えた「渋滞45km」と「混雑ピーク」の差とは - Yahoo!ニュース スタッフブログ

2015/10/28 81 users 見出し テクノロジー Yahoo アカペラ 校歌

突然ですが、以下3つの見出しの中でどれがいちばんクリック率が高かったと思いますか？　今年の夏の甲子園1回戦、敦賀気比（福井）が勝利の校歌を斉唱していた際、音楽が止まってしまいアカペラで熱唱した、というニュースです。 校歌中断 甲子園で観衆手拍子 甲子園勝利の校歌 音楽止まる 甲子園珍事 アカペラで校歌 ◆ Yahoo!ニュース編集部の田中です。Yahoo!ニュース・トピックスの13文字の見出しでは... 続きを読む

施策の効果をみんなで納得して前に進むための「箱ひげ図」 - クックパッド開発者ブログ

2015/10/21 278 users 施策 箱ひげ図 クックパッド はじめ クックパッド開発者ブログ

こんにちは、検索・編成部ディレクターの岡根谷です。 クックパッドを訪れてレシピ検索するユーザーさんの検索成功率を上げるために、日々施策を行っています。 自信を持って進めるためには客観的なデータ はじめはどんなによさそうと思った施策でも、進めていく中で、自分や一緒にやっているエンジニアが施策の価値に自信をなくして停滞する瞬間が必ずあります。 そんな時、A/Bテストの結果などの客観的な定量データは非常... 続きを読む

コンバージョン率を上げるためにA/Bテストを行う上で知っておくべきこと - GIGAZINE

2015/06/11 116 users 割合 クライアント 複数 GIGAZINE デザイン

By A ウェブサイトを構築する上で欠かせないのが、複数の異なるデザインを試してサイトの訪問者数のうち成果に結びついた割合を表すコンバージョン率を比較し、優れたものを導き出す「A/Bテスト」です。多くのクライアントと毎日のようにA/Bテストについて話し合ってきたというRobin Johnsonさんによると、クライアントが必ずと言っていいほど聞いてくるのが「どこからA/Bテストを始めればよいのか？」... 続きを読む

≡ ←ハンバーガーメニューのデザインでクリック率は違う（2014年のA/Bテストの結果から）

2015/06/10 1053 users ハンバーガーメニュー 概要 メニュー 三本線 結果

概要 2014年のA/Bテストの結果によれば、いわゆるハンバーガーメニューは使わない方が良いという結果に。 スマートフォン対応サイトで右上や左上にある「≡」こんな形の三本線のメニューはいわゆるハンバーガーメニューと言いますが、ハンバーガーメニューのデザインに関してA/Bテストを行っていた記事があったので紹介します。 ●ハンバーガーメニューのデザインパターンハンバーガーメニューは色々なデザインがあっ... 続きを読む

知っておくべきモバイルA/Bテストの用語集42 | デザイン | POSTD

2015/05/28 68 users モバイルアプリ POSTD 到来 用語 携帯端末

モバイルの時代の到来によりモバイルアプリケーション上で稼働するA/Bテストの数も増加していますが、モバイルアプリのA/Bテストに関する用語についてはあまり馴染みが無い人も多いかもしれません。モバイルのA/Bテストを成功させるため、まず正しい用語を知ることから始めましょう。相変わらず携帯端末は世界を席巻しており、モバイルアプリケーション上で稼働するA/Bテストの数も増加しています。A/Bテスト自体は... 続きを読む

売れるネット広告社が実践している「縦長LP」の構造　4つのエッセンスと7段階アプローチ|ECzine（イーシージン）

2015/02/27 612 users ギミック フェーズ 仮説 極意 クライアント

売れるネット広告社が教えるランディングページの極意 我々、売れるネット広告社はこれまで数多のクライアントから、累計数百億円の広告費を預かり、数百回に及ぶA/Bテストを実施してきた。A/Bテストの内容もさまざま、仮説のもと、デザインやギミック、キャッチコピー、色など多種多様なテーマである。 その結果、ネット広告入口で新客や見込み客を獲得するフェーズにおいては、「縦長」のランディングページのほうが「費... 続きを読む

【必読】ABテスト、グロースハックで参考にしたい事例＋関連記事10選｜Ferret [フェレット]

2015/01/30 115 users 仮説 Ferret ヒント フェレット うえ

ホームページの改善には欠かせないのがA/Bテストです。 複数の仮説を導き出して、仮説Aと仮説Bを比較するシンプルな検証手法の1つと言えます。 このA/Bテストがヒントとなり、改善した結果、売上が数倍に上がったという例も少なくありません。最近では、グロースハックが話題となったことでもA/Bテストの重要性が再認識されています。 今回は、A/Bテストの実例記事の中からオススメ記事とA/Bテストを行ううえ... 続きを読む

ボタンの色やデザインでPCサイトの収益を高めるための基本ポイント：グロースハッカー養成講座＜1＞ ｜ ライフハッカー［日本版］

2015/01/13 107 users ライフハッカー 収益 グロースハッカー グロースハック ボタン

長谷川賢人  - Webサービス,アイデア発想術,起業  01:00 PM ボタンの色やデザインでPCサイトの収益を高めるための基本ポイント：グロースハッカー養成講座＜1＞ ウェブサイトの収益性やユーザー登録数などを、A/Bテストなどの改善によって高めていく「グロースハック」。それを手がける人たちである「グロースハッカー」の活躍が近年注目されています。以前お届けした記事では、企業やサービスを成長さ... 続きを読む