boost株式会社|毎日を、ゲームに。boost株式会社は、チームとして案件を受ける「ギルドプロジェクト」として、案件ごとに最適なチームを作りお客様に貢献いたします。施策の効果検証で実態を掴むための数字だしで大切なこと施策の効果検証で実態を掴むための数字だしで大切なことカケル2019.04.06こんばんは。次の元号が令和に決まったと同時に平成の幕が閉じるのが近づいている実感してきました。今週は仕事に追われていたのでいつも以上に数字を出しまくりました。今まで出してきて当たり前に考えているものを記事にしたいと思います。今回の大きな項目はこちらです。1公平さ2初速のスピード3算出方法について目次1公平さ2初速のスピード3数字の出し方について最後に1公平さ僕はA/Bテストをやるとき、施策を打ったときの効果検証をすることがよくあるのですが、その時にどういう風に数字を出してるかそれは公平さをしっかりもっていないとミスリードする。当たり前のことですが、期間は必ず同じ周期にする必要がある。曜日によって数字が変動がする可能性が高いので、日数が短い比較する時は必ず同じ曜日で検証したほうが良い。上記の場合、ミスリードしてコンバージョン率が下がるかもしれない。A/Bテストの場合、流入経路とIMP数が公平でないと計測した方が良い。理想の理想はA/Bテストする経路は一緒でロードバランサーでAとBへ振り分けて検証するのがベストです。公平にしてない場合はCTRやコンバージョン率を算出する時、数字が小さければ小さいほど、TAPやコンバージョンの1が大きな影響を及ぼします。ロードバランサーで振り分けるのが難しい場合は期間をずらしてやってみるでも良いと思ってます。早く検証したいや運用で回したいという方はこれで行くのが良いかと思います。時間かけてじっくりやるならば、月の周期も考慮してABテストやれば良いと思います。Monthlyの周期についてはこちらの記事を参照ください。2019.03.16SNS広告で効果的な施策を打つタイミング~Monthly編~こんばんは。花粉の季節みたいですね。僕は花粉症ではないのでつらさはわかりませんが、周りの方はつらいと話している人が多いです。前回はHourly単位の記事を書いたのですが、Monthlyについてもまとめようと思ったの...2初速のスピード効果検証は少し間違えても良いので速報値を出してあげたほうが喜ばれる。優秀なディレクターはリリース直後に初速の数字を気にされる方が多いです。間違えても良いのでざっくりの数値を出してあげることは大切にしてます。完璧な数字のほうが良いから時間を書けたいや抽出期間が短いからまだ出したくないと言って期限を延ばしていたら意思決定が遅くなります。数字を出してその中で色々議論して意思決定をしていくことが大切です。3数字の出し方について平均を出す時は少しのとり方だけで若干数字が変わるので注意です。全体の離脱数ここでも数字が変わってしまう。〇〇率を使う時は様々な分母分子が出てくる可能性があるのでそこは色々な視点で検証できるかを考える必要がある。最後に僕が数字出す時は依頼されたものも出すことはあるが、自分でこの数字の内訳ってどうなっているのだろうと主体的に色々なものを見ていくことが大切にしてます。自分が扱っているサービスやものに興味を持って色々なものを探求していくことが大切だと思ってます。数字を眺めて仮設をしていくが大事だが、自分より優れている人もしくは同等の人と相談しながら連携をとっていくことが大切です。数字を出す目的は真実や実態を把握するために出す。実態と社内の仮設はどうしてもズレが生じるのでそれを埋めるのは数字だと思っているのでこれからも数字を出し続けます。カケルDBエンジニアのカケルと申します。環境へ溶け込めるの得意な方です。学生の頃はバスケをやっており、ランニングが趣味です。ハーフマラソンは完走経験があるので次はフルマラソンも視野に入れるか検討中。ハマると2年は続ける傾向あり。ボーリング2年(ハイスコア238、最高アベレージ170)スキューバー2年(沖縄、伊豆、グアムでのエントリー経験あり、50本くらい)ゴルフ2年(最低スコア231、最高スコア117)仕事はスタートアップ事業の黒字化に向けて、マーケターのサポートしてます。必要なデータのプラスワンを見出すためには何が必要か?を求めながら仕事してます。)トラックバックは利用できません。この記事へのコメントはありません。仙豆のちからで極上ドライヘッドマッサージ受けてみた。2018決勝ネタ『オレオレ詐欺...10おもしろ人狼殺「超人気局の遊び方」ピックアップ記事おもしろデート利用にピッタリ。洋画の邦題大きな違い...。知りたがりの日本人2018.08.18【移住について考える。人狼と言えば、この人!眠りのたくまの素顔に迫る!!ベルトトルトの競馬blog【宝塚記念2020】クロノジェネシス強かった!6馬身差の圧勝で成長...おもしろデート利用にピッタリ。辻2020.09.06【ウェブ解析士×boost企画】ウェブ解析士リレーインタビュー”Ryoma氏”2020.07.21人狼と言えば、この人!眠りのたくまの素顔に迫る!!2020.07.08【宝塚記念2020】クロノジェネシス強かった!6馬身差の圧勝で成長力を見せつける2020.06.29デート利用にピッタリ。boost株式会社|毎日を、ゲームに。