Slide 1

Slide 1 text

How to 組み込みのHello, World「Lチカ」の次は、 PicoRubyで「楽器」を作ってみませんか? craft YOUR handmade PicoRuby Instrument

Slide 2

Slide 2 text

この「楽器」で 大切にしたいこと • どういうコンセプト、フィロソフィー、割り切りにするか

Slide 3

Slide 3 text

音楽いろんな要素がある テンポ、拍子、ハーモニー、メロディー、コード、ス ケール、プレイスタイル、アコースティック、エレク トリック、シンセサイズ、ジャンル、音楽史、etc 一旦全部さておく

Slide 4

Slide 4 text

手作り楽器の最速PicoRubyブートストラップ 1.Feel: Rubyをキメてから理解を広げる 2.Env: ハードウェアは一旦決め打ち 3.Vibe: 初期プロンプト&repoの提示

Slide 5

Slide 5 text

この後すぐ作るPicoRuby「楽器」 1.この「楽器」で大切にしたいこと 2.マイコンやセンサーの選び方 3.「楽器」の成り立たせ方 4.この後作る方法 5.出力デモ

Slide 6

Slide 6 text

マイコンやセンサーの選び方 • 楽器を作りの最初の一歩でのベストチョイスとは

Slide 7

Slide 7 text

PicoRubyがサポートしているマイコン RP2040系、ESP32系、魅力で目移りしちゃう https://www.switch-science.com/products/10258 https://www.switch-science.com/products/6260

Slide 8

Slide 8 text

限られた性能をいかに使うか アルペジオ、デチューン、ビブラート、エンベロープ、デュー ティ比、ピッチスイープ、ノイズドラム、ディレイエコー、ボ イススティール、波形メモリ、波形差し替え、音量PCM、 DPCM、ビット削減、etc

Slide 9

Slide 9 text

限られた性能をいかに使うか アルペジオ、デチューン、ビブラート、エンベロープ、デュー ティ比、ピッチスイープ、ノイズドラム、ディレイエコー、ボ イススティール、波形メモリ、波形差し替え、音量PCM、 DPCM、ビット削減、etc 一旦全部さておく

Slide 10

Slide 10 text

開発容易性・性能のゆとり・普及率

Slide 11

Slide 11 text

開発容易性・性能のゆとり・普及率 • 国内シェア約50% • 組み込み系じゃないテックカンファレンスでも著名 • 各種センサー含む豊富な入出力機構 • Unix文化な開発キット + オフィシャルAPI充実

Slide 12

Slide 12 text

開発容易性・性能のゆとり・普及率 https://www.apple.com/jp/iphone/

Slide 13

Slide 13 text

高性能マイコンボード iPhone • iOSDC Japan 2026で 開発手法を紹介 • Apple Watchにも応用可能 • Macでも可 • 各種センサー含む豊富な入出力機構 • Unix文化な開発キット + オフィシャルAPI充実

Slide 14

Slide 14 text

高性能マイコンボード iPhone

Slide 15

Slide 15 text

"PicoRubyをAppleプラットフォーム上でビルドおよび実行します" https://github.com/bash0C7/R2P2-darwin

Slide 16

Slide 16 text

コアロジックがPicoRuby • Kotlin Multiplatform, Unity as a Library同種 様 iOSDC Japan 2026 マイコン向けの軽量Ruby「PicoRuby」で各種デバイスを制御するネイティブアプリの実現手法 https://speakerdeck.com/bash0c7/maikonmuke-no-keiryou-ruby-picoruby-de-kakushu-debaisu-o-seigyo-suru-no-jitsugen-shuhou?slide=16

Slide 17

Slide 17 text

iPhone上に送り込む手筈 R2P2-darwinからMRuby::CrossBuildする $ bin/rake vendor:setup_all $ scripts/setup_spinel.sh $ bin/rake darwin:sync $ bin/rake 'darwin:run[ios:sendairk03-instrument:device:all]' device:all = device:lib → gen → device:build → device:run device:lib iphoneos arm64のlibmruby.aをクロスコンパイル gen xcodegenでXcode projectを作る device:build 署名してxcodebuild device:run devicectlでiPhoneへinstallして起動 bash0C7/sendairk03̲instrument(repo直下で打つコマンド)

Slide 18

Slide 18 text

iPhoneのclangでPicoRubyごとビルド sdk_path = `xcrun --sdk iphoneos --show-sdk-path`.strip clang = `xcrun --sdk iphoneos --find clang`.strip # ... MRuby::CrossBuild.new("ios-sendairk03-instrument-device") do |conf| conf.toolchain :clang # ... conf.cc.command = clang conf.linker.command = clang # ... conf.cc.flags << "-arch" << "arm64" conf.cc.flags << "-isysroot" << sdk_path conf.cc.flags << "-miphoneos-version-min=#{ios_min}" # ... conf.picoruby # ... conf.gem gemdir: "#{gems}/picoruby-instrumentdsp" conf.gem gemdir: "#{gems}/picoruby-multicore" conf.gem gemdir: "#{gems}/picoruby-instrument-synth" end bash0C7/sendairk03̲instrument/build̲config/darwin-ios-instrument-device.rb(抜粋)

Slide 19

Slide 19 text

「楽器」の成り立たせ方 • FeelとVibeな音を出すことを表現する構文とは

Slide 20

Slide 20 text

loop do ~ endの中でぐるぐる回す 入力 処理 これしたら音を鳴らせ → 音のデータを こうなったら音を止めろ メモリ上に置く loop do led.on sleep 0.5 led.off end → 音のデータを外に出す 組み込みの ハ ロ 出力 ワ Hello, World コト 「Lチカ」同じ構造 loop do #入力 #処理 #出力 end 20

Slide 21

Slide 21 text

Rubyをキメる=DSLのデザインを定める loop do input = App.read # 入力 sound = render(input) do # 処理 ... ... ... ... ... end Audio.write(sound) # 出力 end 説明用の擬似コード。実物はbash0C7/sendairk03̲instrument/examples/darwin/ios/instrument/app.rb

Slide 22

Slide 22 text

それはそうと音を作るとは • これ自体はプロンプトしたらいい • (ドン) (プー) (ジャン) (ポロン) • 振わせ、削り、重ねる計算の連鎖 • 徐々に仕組みを理解すればVibes上がる • 楽器として「音を出す」ための課題がある

Slide 23

Slide 23 text

楽器として「音を出す」ための課題 レイテンシー • 応答速度 https://darashi.net/2026/11/17/latency-ja/

Slide 24

Slide 24 text

楽器として「音を出す」ための課題 レイテンシー • 応答速度: 3フレ( 50ms)ぐらいに収めたい • 60fpsで1フレ 16ms

Slide 25

Slide 25 text

https://x.com/hanachin_/status/2047667755420401892 https://www.maywadenki.com/news/joyful_maywa_2026/

Slide 26

Slide 26 text

No content

Slide 27

Slide 27 text

No content

Slide 28

Slide 28 text

No content

Slide 29

Slide 29 text

No content

Slide 30

Slide 30 text

No content

Slide 31

Slide 31 text

No content

Slide 32

Slide 32 text

楽器として「音を出す」ための課題 レイテンシー • 応答速度: 3フレ( 50ms)ぐらいに収めたい • 60fpsで1フレ 16ms • "振わせ、削り、重ねる計算の連鎖" • 素直に書くと、計算量も空間も嵩む • CとかSwiftに回す...? • Rubyで書きたいわけですよ

Slide 33

Slide 33 text

Rubyで書いてネイティブの速度を得る いい仕組みがある https://github.com/matz/spinel

Slide 34

Slide 34 text

シングルコア直列で高速化 SpinelしたRubyをmrbgem化するツール利用 #: (Float, Float) -> Float def self.blep(phase, step) if step > 0.0 && phase < step t = phase / step t + t - t * t - 1.0 elsif step > 0.0 && phase > 1.0 - step t = (phase - 1.0) / step t * t + t + t + 1.0 else 0.0 end end bash0C7/sendairk03̲instrument/gems/picoruby-instrument-synth/dsp/instrument̲dsp.rb(抜粋) suppify: https://github.com/bash0C7/suppify

Slide 35

Slide 35 text

シングルコア直列で高速化 SpinelしたRubyコードをmrbgems化 https://github.com/bash0C7/suppify

Slide 36

Slide 36 text

suppifyが生成するmrbgem Ruby ⇨ C ⇨ Native Extensionのmrbgem経由の利用 picoruby-instrument-synth/dsp/instrument_dsp.rb 人が書くRuby ↓ suppify + spinel picoruby-instrumentdsp/ mrbgem.rake include/suppify/instrumentdsp.h Cの契約ヘッダ src/instrumentdsp_spinel.c RubyをCにしたもの src/instrumentdsp_glue.c 接続用グルー src/binding.c 今回は空 src/sp_*.c spinelのruntimeなどを同梱 bash0C7/sendairk03̲instrument/gems/picoruby-instrument-synth と build/instrument-dsp/picoruby-instrumentdsp(生成物)

Slide 37

Slide 37 text

マイコンもiPhoneもマルチコア持ってる SpinelしたRubyコードを別コアで実行 https://github.com/bash0C7/picoruby-multicore

Slide 38

Slide 38 text

マイコンもiPhoneもマルチコア持ってる SpinelしたRubyコードを別コアで実行 def fib(n) a = 0 b = 1 i = 0 while i < n t = (a + b) % 1_000_000_007 a = b b = t i += 1 end a end puts "fib(40) => #{Multicore.run(:fib, 40).inspect}" bash0C7/picoruby-multicore/README.md(ESP32で動かした例) https://github.com/bash0C7/picoruby-multicore

Slide 39

Slide 39 text

楽器の音もpicoruby-multicoreで作る fibと同じく、DSPのrenderをworkerで動かす workerの側(VMなし) module InstrumentDsp def self.render(frames, voices, sample_rate) frame = 0 while frame < frames # ... end # ... end end bash0C7/sendairk03̲instrument/gems/picoruby-instrument-synth/dsp/instrument̲dsp.rb(抜粋)

Slide 40

Slide 40 text

How to 組み込みのHello, World「Lチカ」の次は、 PicoRubyで「楽器」を作ってみませんか? craft YOUR handmade PicoRuby Instrument

Slide 41

Slide 41 text

この後作る方法 • 手っ取り早く音を出して楽しもう

Slide 42

Slide 42 text

手作り楽器の最速PicoRubyブートストラップ 1.Feel: Rubyをキメてから理解を広げる 2.Env: ハードウェアは一旦決め打ち 3.Vibe: 初期プロンプト&repoの提示

Slide 43

Slide 43 text

楽器のデザイン • どのように構えるのか • どんな演奏したいか • どんな音を鳴らしたいか • どんなRubyで表現したいか • 誰がどう使うのか

Slide 44

Slide 44 text

どのようなDSLを実現するのか 演奏体験 デザイン → DSL どう表現するのか → 実装 AIと作る 触る → 鳴る / 回す → 音が変わる その対応関係を、DSLで読めるようにする 書き味の選択が、楽器の体験を決める 44

Slide 45

Slide 45 text

演奏体験 • iPhone • github: bash0C7/R2P2-darwin • github: bash0C7/picoruby/tree/port-darwin • スワイプや傾きで変化を出す • オート演奏で、メロディーはタップ制御 • 通信は使わない

Slide 46

Slide 46 text

Rubyをキメる ここが理解の起点!初手は気にしない。音を楽しみつつ育てよう! loop do input = App.read sound = Synth.render do |synth| synth.play :melody, score: :lead do |tone| ... end .... end Audio.write(sound) end bash0C7/sendairk03̲instrument/examples/darwin/ios/instrument/app.rb(簡略化)

Slide 47

Slide 47 text

基礎プロンプト案 あとは、ひたすら音の模索とパフォーマンスチューニング!

Slide 48

Slide 48 text

出力デモ • みんなお待たせ!

Slide 49

Slide 49 text

続きはみなさんのお手元で! 自分好みの音とは、演奏とは、楽器とは、お試しください