嘘(Data Science)はとびきりの愛なんだよ？

AbemaTV, Inc. All Rights Reserved  AbemaTV, Inc. All Rights Reserved 
1 嘘　はとびきりの愛なんだよ？ 2023 September 20th 〜アニメ分析におけるギリギリのラインを攻める〜 Haruka Matsuzaki Data Science

matsuzaki haruka 苺プロ所属  東大 ( 数理科学 )→ 院 →Works→Recruit→PKSHA(EM) →FEZ(CDS)→苺プロ  ベイズ・画像・LLMetc  2 Profile

3 キャプション【推しの子】紹介公式サイト: ichigoproduction.com

4 キャプションこのコーナーの趣旨【推しの子】に関するデータサイエンスを擬似体験していただき、一緒に困難を乗り越えていただくことで、 ABEMAのデータに興味を持っていただけるのではないか

5 キャプション Now *:･ﾟ✧ On Air✧*｡･ﾟ

6 キャプション配属あなたはABEMAのDSです。1ヶ月後放送の大型アニメ。そのUUを増やす宣伝プロジェクトに配属されました。収益=広告単価 x UU (月額課金は今回考慮しないとする) Unique User

7 キャプションマーケティングチームの主な構成 • マーケティングボード（担当執行役員） • マーケティング企画 • デジタルマーケティング運用 • クリエイティブ制作（宣伝素材画像・動画作成） • あなた（効果測定・軌道修正担当）

8 キャプションマーケティング企画との会話 • プロモーション期間は放映日前後2週間 • 年間宣伝予算から獲得したのはXXX円 • KPIは視聴数（サブ：インストール数・復帰数） • 出稿デジタルメディアはTwitter(X)をはじめ１０個 • 直接効果が見えるものが２個・それ以外が８個

9 キャプション Now *:･ﾟ✧ Thinking Time✧*｡･ﾟ 10秒で泣ける天才子役の重曹ちゃん　限定販売中

10 キャプションクリエイティブ担当との会話

11 キャプションあなたが考えたこと • 大まかには２段階のモデルになるのではないか。 ◦ RoI推定 ◦ 数理最適化 Return on Investment UU=Σメディア効果 x 予算

12 キャプションメディア効果予測モデル出来るだけ普通のモデルを採用 Bayesian Methods for Media Mix Modeling with Carryover and Shape Effects (2017) https://static.googleusercontent.com/media/research.google.com/ja//pubs/archive/46001.pdf

13 キャプションメディア効果予測モデル

15 キャプションメディア効果予測モデル星野瑠美衣（著作権保護済）です。いくつか質問させていただきたいのですが

16 キャプションメディア効果予測モデル Q: なぜβ0はbaseにしかないのですか？

17 キャプションメディア効果予測モデル Q: なぜコントロール変数は γ・zなの？

18 キャプションメディア効果予測モデル Q: なぜ１足すの？

20 キャプションメディア効果予測モデル Q: なぜxではなくbなの？

21 キャプションメディア効果予測モデル：補足　AdStockの考え方忙忙忙推暇暇推推 budget=Intention x=Treat Time

23 キャプションメディア効果予測モデルただの内積じゃない。

25 キャプションメディア効果予測モデルふうん・・・

26 キャプションメディア効果予測モデル Q: 素人質問で大変恐縮なのですが、なぜ Hill 関数を使ってないのですか？

27 キャプションメディア効果予測モデル（確定）

28 キャプション予測vs実績ベース/広告効果分解 ▪　予測誤差 ▪　広告効果 ▪　ベースUU ←2話目と比較すると1日目の来訪者は過剰。広告開始が2日遅れたため、広告効果ではない

29 キャプションメディア効果予測 • シンプルな予測モデル • 決定係数の高さ

30 キャプションところで問題ですこれから起こりうる事件にはどのようなものがあるか？

31 キャプション Now *:･ﾟ✧ Thinking Time✧*｡･ﾟ 10秒で泣ける天才子役の重曹ちゃん　限定販売中

32 キャプションでは解答これから情報を小出しにしていきます。最初に作ったモデルを補正してください。

33 キャプション解答①TVの存在 • https://ichigoproduction.com/onair/ • TOKYO MXほか • ABEMAほか • Migration Model • 2話目から見る人がいるのでモデルを直してください。

34 キャプション解答②動画/静止画バナー • 動画バナーは静止画バナーに比べクリック率が高い。 ◦ 2倍ぐらい？→XX倍 • 動画の権利問題で出せたメディアは限定的です。 • 動画バナーが掲載されたメディアを補正してください。 • ちなみにクリック率と視聴率は相関が低いです。

35 キャプション解答③ゴールデンウィーク無料開放 • 通常　最新話無料 • 5/1~7無料開放イッキ見狙い • 介入としてモデリング可能 • Migration Model • 顧客は連続話をみません。

36 キャプション解答④Twitterバズ　第7話 • 原作で炎上した黒川あかねのエピソードの炎上 • 第7話だけ視聴数が多い（+20%~30%） • 第8話へ定着する人もいる • 事前にバズのサイズは分かりませんが、モデルに組み込んでください。

37 キャプション解答⑤2023年6月10日　アイドルビルボード入り • YOASOBIが米ビルボードで首位になってしまいました ◦ “Global Excl. U.S.” • 6/10以降の全ての回が影響を受けます

38 キャプション解答⑥最終話第11話 • 原作ファンにとっては最終話は途中 • どこまで見るか確認の意味で最終話だけ見る人がいる • これはZero Inflationでモデリングできる • ただしパラメーターは増えます

39 キャプション解答⑦自由度 • パラメーター数 > データ数だと過学習します。 • アニメ宣伝は情報解禁日〜放映日(14) x メディア数(10) • パラメーターごとに学習に必要なサンプル数を考慮 • AICは参考にはなるが当然漸近してないので自己責任で ※WAICは漸近する

40 キャプション Fin *:･ﾟ✧ いいモデルはでき✧*｡･ﾟ *:･ﾟ✧ ましたか？✧*｡･ﾟ 10秒で泣ける天才子役の重曹ちゃん　限定販売中

41 キャプション疑問データサイエンスは正しいしすごい。が、それはデータと時間が無限にあればの話であるじゃあデータが貯まるまで待ってればいいのか？それじゃ何年もかかるし、アニメが終わってしまうというか宣伝の入稿締切ががが

42 星野瑠美衣の言葉

46 キャプションメディア効果予測モデル（確定）完成

47 キャプション結論 • Simple is Best / このモデルはリリースされ、その後も使われ続けている（決定係数が高くdim小） • 途中で起こった事件はεがサンプルされたに過ぎない ◦ この状況でシンプル選好するのはリスク管理 • LTV/数理最適化については紙幅がないフェルマーバイアス

48 研究組織⇄事業組織大人の時間で考えてる人 (合理性を追求する人) 今を走ってる人 (お金を動かす人) ❤

49 キャプション ※タイトルに込められた”愛” 『世の中には3種類の嘘がある: 嘘、大嘘、そして統計だ』星野アイの名言:『嘘はとびきりの愛なんだよ？』 →「データサイエンスは競合優位な意思決定が全て」 →「自然界にパターンを見出す」人間の特性の限界を示唆 →最善性を現実の複雑性が決定するなら、シンプルさが愛 Data Science バリアンスバイアス

53 キャプション

55 キャプション

嘘(Data Science)はとびきりの愛なんだよ？

嘘(Data Science)はとびきりの愛なんだよ？

More Decks by CyberAgent

Other Decks in Technology

Featured

Transcript