AWSで動画変換&配信基盤を作った話

e-Zuka Tech Night #48

1. Tikる e-Zuka Tech Night #48 Keisuke Mory Tik（Tok的な動画系アプリをつく）る
2. 自己紹介
3. もりけいすけ @moririn772
4. 近畿大学 山崎ゼミ3年
5. Bitcoin
6. Ruby
9. Tikる
11. Tikる= TikTokに動画を投稿する
12. Tikる= TikTokに動画を投稿する
13. Tikる＝ TikTok 的な動画系アプリを それっぽく作る
14. Tikる＝ TikTok 的な動画系アプリを それっぽく作る
15. タイトル詐欺を お許しください
16. Long Talk になってしまうので 配信基盤の話だけになります
17. AWSで変換&配信基盤を作った話 e-Zuka Tech Night #48 Keisuke Mory Tik (Tok的な動画系アプリをつく) るために
18. 動画ストリーミング配信
19. MP4 ばらまく？
20. MP4 ばらまく？
21. RTMP
22. RTMP
23. HLSでばらまく
24. HLSでばらまく "
25. HLS HTTP LIVE STREAMING
26. HLS HTTPベースの配信プロトコル .m3u8 → プレイリストファイル .ts → 分割された動画ファイル
27. HLS VOD, Streaming 両方OK アダプティブストリーミング CDNと親和性GOOD
28. https://developer.apple.com/documentation/http_live_streaming
29. MP4 → HLS に変換して 見れる状態にしたい
30. 今回のアーキテクチャ
31. S3 - 変換前 Lambda S3 - 変換後 配信用 Cloud Front MediaConvert 動画 ユーザー
32. S3に動画をアップロード （今回は .mp4 を想定） S3 - 変換前 Lambda S3 - 変換後 配信用 Cloud Front 動画 ユーザー MediaConvert
33. S3 - 変換前 Lambda S3 - 変換後 配信用 Cloud Front 動画 ユーザー MediaConvert アップロードが完了するとLambdaが発火 MediaConvert に変換ジョブをぶん投げる
34. .mp4 => HLS に変換 変換後のファイルを 出力用バケットに吐き出す S3 - 変換前 Lambda S3 - 変換後 配信用 Cloud Front 動画 ユーザー MediaConvert
35. S3 - 変換前 Lambda S3 - 変換後 配信用 Cloud Front 動画 ユーザー MediaConvert Cloud Front を介していい感じに エンドユーザーへ配信される
36. S3 - 変換前 Lambda S3 - 変換後 配信用 Cloud Front MediaConvert 動画 ユーザー
37. 細かいところをみていきましょう
38. S3 - 変換前 Lambda S3 - 変換後 配信用 Cloud Front MediaConvert 動画 ユーザー
39. 全体こんな感じ
40. 全体こんな感じ Lambda からこのへんの サービスにアクセスしたい
41. IAMロールの作成
42. さっき作ったやつ
43. アップロード用バケットに .mp4ファイルが追加されたら
44. handler.rb の transcode_videoメソッドが発火
45. MediaConverter に 変換ジョブを送りつける （CloudWatchにログを吐く） 見えないと思うのでGitHub参照 https://gist.github.com/moririn772/ 7aba5a673d77aea75df19a254a5a1627
46. S3 - 変換前 Lambda S3 - 変換後 配信用 Cloud Front MediaConvert 動画 ユーザー
47. ジョブテンプレートを作成 入力 HLS JPEG 　ジョブテンプレートの例 出力 MP4 入出力の設定（形式, コーデック etc…）をテンプレ化 ごにょごにょ ごにょごにょ
48. セグメント長　：10秒 シングルディレクトリ構造
49. コーデック　　：MPEG-4 H.264 フレームレート：30 ビットレート　：5000000
50. サムネイルの生成も同時に行う （今回は1枚だけ）
51. S3 - 変換前 Lambda S3 - 変換後 配信用 Cloud Front MediaConvert 動画 ユーザー
52. S3 - 変換前 Lambda S3 - 変換後 配信用 Cloud Front MediaConvert 動画 ユーザー
53. ハマったポイント
54. Endpointがなんちゃら〜 のエラー 解決の参考→ [小ネタ] AWS Elemental MediaConvertをAWS CLIで使うときの注意点！〜アカウント個別のendpointを指定しよう〜 https://dev.classmethod.jp/cloud/aws/aws-elemental-mediaconvert-aws-cli-command-needs-endpoint-url-option/#toc-endpointmediaconvert
55. Endpointがなんちゃら〜 のエラー ここに書いてある
56. Endpointがなんちゃら〜 のエラー クライアントのインスタンスを 作る際に渡してあげる
57. やってみる
58. ユーザーが動画をアップロード ※ 説明用にコンソールからアップロード
59. ジョブが走り出す
62. 動画配信のサービスが つくれそうな気がする
63. やっていきましょう
64. 告知
66. ＠学生の皆さん 興味があれば是非
67. ＠企業の皆さん スポンサー, 会場提供等 ご検討ください
68. AWSで変換&配信基盤を作った話 e-Zuka Tech Night #48 Keisuke Mory Tik (Tok的な動画系アプリをつく) るために
69. ご清聴ありがとうございました