演奏動画録音/録画システム

演奏動画録音/録画システム

Transcript

1. 演奏動画録音/録画システム Mamutaloh/まむたろう(Gt. Drs.)
2. 序論 ギターの演奏動画は多く作成されており、BackTrackや音源を流しながら 演奏者が楽器を弾いている様子を実際の音と一緒に流す[1]ものである。 ギターアンプの音を拾い、スマートフォンの録画機能を用いて作成する方 法がある。本手法は生活音など、楽器の音以外のノイズが入ってしまう。 もっともメジャーな手法として、演奏の映像と録音を別に撮っておき映像 処理ソフトで合成する[2]といった方法が知られている。本手法は高い品質 の映像が作成できるが、作成までの手間がかかるという課題が存在する。 本手法では動画撮影と録音を同時に行うことで、高品質さを備えながら煩 雑さを低減するシステムを提案する。 [1] 【配信機材】お手持ちのスマホで演奏動画を撮ろう！お手軽に動画のクオリティをグレードアップ♪ https://www.shimamura.co.jp/shop/wakayama/product/20210622/5432 [2] youtubeやニコ動など「弾いてみた」動画を撮影する方法 https://guitar-hakase.com/2216/ 参考文献
3. Raspberry-Pi 5 オーディオインターフェース（ZOOM G5n） USB USB 6.3mm フォンプラグ 外付けHDD Webカメラ システム構成図
4. 項目 内容 マシン Raspberry-Pi 第5世代 OS Ubuntu(24.02 LTS) 言語 C/C++ フレームワーク なし ライブラリ 画像処理 OpenCV 4.9.0 音声信号処理 PortAudio 19.7.0 要件定義・設計手法 ユースケース駆動開発 ソフトウエア設計手法 クリーンアーキテクチャ (オニオンアーキテクチャ) システム環境
5. アクター 演奏の映像をリ アルタイムで画 面で観たい 演奏を映像の録 画と演奏音声の 録音したい 演奏の音声をリ アルタイムでモ ニターしたい 演奏動画録音/録画システム アクター リアルタイム でモニターし たい アクター アクター [要求定義①] ユースケース設計
6. 音声データ 動画データ ファイル名 出力先パス ファイルフォーマット 録画時間 動画データ 音声データ [要求定義②] ドメインモデル設計 ストリームデータ (Interface) コーデック 録画時間 動画データ 映像データ
7. 開始ボタン 終了ボタン ②ストリームをオープンし、 バッファにデータを格納する 映像データ 音声データ ④映像データと音声データを結合し、 動画ファイルを出力する 動画ファイル ③演奏が終わったら 終了ボタンをクリック ① [分析・予備設計レビュー] ロバストネス分析
8. 画面 プログラム 映像データ 音声データ 動画ファイル [詳細設計] シーケンス図 演奏開始 処理開始命令 映像のストリームを オープン 音声のストリームを オープン 演奏終了 映像データ転送開始 処理終了命令 映像データ転送開始 映像停止 音声停止 映像データ 音声データ 音声と映像を合成して 動画ファイルを生成 動画ファイルの書き出し 映像・音声のスト リームをクローズ 書き出し完了 書き出し完了画面 書き出し完了通知