Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Sign up for free
Menu
Search
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Pricing
Search
Sign in
Sign up for free
足位置の視覚的提示による電子オルガンのペダル鍵盤演奏学習支援システムの開発と評価 / ec79...
Search
Sponsored
·
Your Podcast. Everywhere. Effortlessly.
Share. Educate. Inspire. Entertain. You do you. We'll handle the rest.
→
北海道情報大学 湯村研究室
PRO
March 10, 2026
Research
4
0
Share
Embed
Copy iframe code
Copy JS code
Copy link
Start on current slide
足位置の視覚的提示による電子オルガンのペダル鍵盤演奏学習支援システムの開発と評価 / ec79-hokin
詳細:
https://dl.yumulab.org/ec79-hokin/
北海道情報大学 湯村研究室
PRO
March 10, 2026
Transcript
19 slides
足位置の視覚的提示による電子オルガンの ペダル鍵盤演奏学習支援システムの開発と評価 寳金 和志,湯村 翼 北海道情報大学
背景 | 電子オルガン • 電子オルガン:電子回路から発生する信号で演奏する鍵盤楽器 ヤマハ社 ローランド社 エレクトーン ELB-02 ミュージックアトリエ
AT-80S 画像は [i] より引用 画像は [ii] より引用 • 足で演奏するペダル鍵盤が備えられる • ペダル鍵盤では、左足でベースラインを演奏する [i]ヤマハ | ELB-02 - エレクトーン - 概要 https://jp.yamaha.com/products/musical_instruments/keyboards/electone/elb-02/index.html [ii] Roland - AT-80S | MUSIC ATELIER https://www.roland.com/jp/products/at-80s/ 2
課題・目的 • 姿勢維持のため、ペダル鍵盤演奏中に足元を見ないことが望ましい 課題 • ピアノ等の手鍵盤楽器演奏経験者でも、ペダル鍵盤には不慣れ • 足元を見て練習すると、悪い姿勢が定着してしまう 目的 •
ペダル鍵盤演奏初心者向けの演奏学習を支援 3
提案手法 • 足元を見ずに足の位置を確認できるシステムを提案 • 手鍵盤上部のモニタに足とペダル鍵盤の位置関係を表示 • 足位置は2次元マーカとカメラで認識 4
関連研究 • 楽器演奏の運指位置を表示し演奏や学習を支援するシステムが存在 • ピアノ [1][2]、ギター [3] • ペダル鍵盤を対象にした研究は無い ピアノ学習支援システム,竹川ら(2013)
ギター演奏支援システム,元川ら(2006) 画像は [1] より引用 画像は [3] より引用 [1] 竹川佳成,椿本弥生,田柳恵美子,平田圭二: 鍵盤上への演奏補助情報投影機能をもつピアノ学習支援システムにおける熟達化プロセスの調査,研究報告エンタテインメントコンピューティ ング (EC), Vol. 2013, No. 7, pp. 1–8 (2013). [2] 大河原正憲,武田正之: 演奏者に合う指使いを学習できる 光と振動を活用したピアノ独習支援システム,第 15 回日 本ソフトウェア科学会インタラクティブシステムとソフト ウェアに関す るワークショップ (WISS 2007),pp. 153–154 (2007). [3] 元川洋一,斎藤英雄: AR Guitar: 拡張現実感を用いたギターの演奏支援システム,日本バーチャルリアリティ学会 第 11 回大会論文集,pp. 73–76 (2006). 5
実装 | システム構成 ペダル鍵盤 PC ARマーカ カメラ 足 ARマーカの画像認識により足の位置を取得 6
実装 | ハードウェア • studiologic社 MP-117を使用 • MIDI出力が可能なペダル鍵盤 • 本システム自体は、機種に依存せず、どのペダル鍵盤でも対応可能
studiologic社 MP-117 画像は [iii] より引用 [iii] MP-113/117 - Studiologic https://www.studiologic-music.com/products/mp_pedalboard/ 7
実装 | ソフトウェア • p5.js • JavaScriptライブラリ • Processingに似た記法 •
Webブラウザで実行可能 • p5.simpleAR • p5.jsで簡単にARマーカを扱うためのオープンソースライブラリ • p5.sound.js • p5.js内でサウンド操作を行うためのオープンソースライブラリ 8
実装 | 提示方法 • 文字 • 映像 • イラスト 現在の音はファです
上記の3つから組み合わせる 9
デモ 10
デモ 11
評価実験 | 概要 • 対象:研究室内の大学生/大学院生 計9人 • 実際にきらきら星を演奏してもらい、アンケートに回答 • 首角度判定システムにより、首の角度を計測
12
評価実験 | 概要 • アンケートは12項目 5段階評価と自由記述 13
首角度判定システム • p5.jsにてMediaPipeを使い骨格認識を行うシステム • 被験者には最初に下を向いてもらい、下を向いた時の座標を保存 • システムを起動することにより、下を向いているか、それとも正面を向 いているかを判定 14
評価実験 | 結果(5段階評価) • 本システムを肯定的に評価する傾向が見られた 15
評価実験 | 結果(自由記述) • Q10では、「 足の位置を掴むヒントになった 」「 下を見ないことで、 手元や楽譜に集中できる 」「
鍵盤の位置を楽譜を見ながらでも探るこ とができた 」といった回答があった • Q11では、「 検出しないときがあった 」「 ペダル鍵盤に足をかけた時 に表示されていなかった 」「 判定が微妙にずれている 」といった回答 があった。 16
評価実験 | 結果(首角度判定) • 本システムを使用していない場合ほぼ常に下を見ながら演奏していた • 本システムの映像での表示をしていた場合、平均して3回だった • 本システムのイラストでの表示をしていた場合、人によって大きな差が 出ていた
17
評価実験 | 考察 • 本システム使用時の演奏姿勢は、使用しないときに比べて改善していた • 2次元マーカの認識性が悪く、表示が不安定だった • 2次元マーカを絶対座標で読み取っているため、カメラ位置がずれてし まうことにより、想定していた座標とずれることがある
• 衣類によってマーカが隠れてしまい、認識されないときがあると考える • 解決方法として鍵盤側にも2次元マーカを付与し、相対座標で読み取る ようにする • 複数の視点からの映像を使い、2次元マーカが隠れて見えないという事 象をなくす必要があると考える 18
まとめ • 演奏姿勢を保ったまま足の位置を視認できるシステムの開発を行った • 本システムを使用することで姿勢を崩さず演奏をすることができるとわ かった • 評価実験より、 2次元マーカの認識性に課題があるとわかった •
今後は、鍵盤にも2次元マーカを付与し、2次元マーカの認識性を上昇 させる 19
More Decks by 北海道情報大学 湯村研究室
See All by 北海道情報大学 湯村研究室
湯村研究室の紹介2026 / yumulab2026
yumulab
PRO
0
230
オープンキャンパス模擬講義 Webカメラを使ったインタラクティブWebアプリの開発 / oc2026
yumulab
PRO
0
84
非試合日の野球場を楽しむためのARホームランボールキャッチ体験システムの開発 / EC79-miyazaki
yumulab
PRO
0
540
MR流体を用いたセルフセンシング可能な触覚デバイスの提案 / haptics36-kamimura
yumulab
PRO
0
220
ASMR耳かき動画のための音と触覚の同時提示システムにおけるパラメトリックスピーカーの配置検討 / haptics36-shimizu
yumulab
PRO
0
4
ノア:メタバース空間で対話相手に向かって自律移動するAIアバターの開発と評価 / ec79-oyamada
yumulab
PRO
0
0
リン酸二水素アンモニウム結晶のコンピュテーショナルデザインの検討 / ec79-tamahori
yumulab
PRO
0
2
推しみん:推しとの疑似会話体験を活用した睡眠管理アプリの提案 / ec79-oota
yumulab
PRO
0
1
Re:CODE - 古いギターを再利用した弾き語りのための電子楽器の開発 / csmicro25-hayasaka
yumulab
PRO
0
0
Other Decks in Research
See All in Research
フィジカルAIの社会実装に向けて -AIエージェントからAgentic Roboticsへ-
hf149
1
2.8k
横浜市長(山中氏)の言動にかかる第三者による調査報告書
sishi2026
0
680
視覚若手の会LENSって何??
mickey_0226
0
420
AI対話に何を挟むか ― 高回転対話・デジタル摘録・手書き記録による創造体験の違い|日本創造学会2026
ishiirikie
0
210
MIRU2026 チュートリアル講演2:三次元データ処理の動向
nnchiba
8
5.6k
Model Predictive Control for Uncertain Systems: Robust & Data-Driven Designs
kohlerjohannes
0
220
2025年度秋葉原ウォーカブルプロジェクト調査報告 「アキバらしいウォーカブル」とは何か
izumiyama_lab
1
310
J-STAGEの現況と全文XML登載必須化について
xspa2012
0
410
Les émissions de méthane entérique en élevage laitier : Enjeux et travaux menés en Afrique de l’Ouest et en France
institutdelelevage
PRO
0
160
Work in progress: How have changes in the labour market over the past decade affected attitudes to work?
resolutionfoundation
0
360
Adapter les bergeries aux fortes chaleurs
institutdelelevage
PRO
0
180
XDPerf: A High-Performance Traffic Generator Built with WASM and eBPF
takehaya
1
390
Featured
See All Featured
Exploring the Power of Turbo Streams & Action Cable | RailsConf2023
kevinliebholz
37
6.7k
DevOps and Value Stream Thinking: Enabling flow, efficiency and business value
helenjbeal
2
450
Digital Ethics as a Driver of Design Innovation
axbom
PRO
2
530
Improving Core Web Vitals using Speculation Rules API
sergeychernyshev
21
1.7k
Future Trends and Review - Lecture 12 - Web Technologies (1019888BNR)
signer
PRO
0
3.8k
Hiding What from Whom? A Critical Review of the History of Programming languages for Music
tomoyanonymous
3
1.4k
The Straight Up "How To Draw Better" Workshop
denniskardys
239
140k
Bioeconomy Workshop: Dr. Julius Ecuru, Opportunities for a Bioeconomy in West Africa
akademiya2063
PRO
1
460
Large-scale JavaScript Application Architecture
addyosmani
516
110k
Conquering PDFs: document understanding beyond plain text
inesmontani
PRO
4
3.3k
Taking LLMs out of the black box: A practical guide to human-in-the-loop distillation
inesmontani
PRO
3
2.5k
職位にかかわらず全員がリーダーシップを発揮するチーム作り / Building a team where everyone can demonstrate leadership regardless of position
madoxten
70
69k