Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
【Crystal】Concurrency
Search
at_grandpa
July 18, 2018
Technology
3
880
【Crystal】Concurrency
crystal.tokyo #7 での発表資料です。
https://crystal.connpass.com/event/93629/
at_grandpa
July 18, 2018
Tweet
Share
More Decks by at_grandpa
See All by at_grandpa
技術書典5でチャレンジしたあれこれ
atgrandpa
3
1.9k
CSS組版おもしろい!
atgrandpa
1
310
Rubyを好きになった過程
atgrandpa
3
1.5k
技術同人誌を執筆して得たこと
atgrandpa
3
1.5k
【Crystal】Macroについて
atgrandpa
3
1.5k
初のサークル参加で気づいた小さなこと
atgrandpa
0
490
Other Decks in Technology
See All in Technology
AIAgentの限界を超え、 現場を動かすWorkflowAgentの設計と実践
miyatakoji
0
130
KAGのLT会 #8 - 東京リージョンでGAしたAmazon Q in QuickSightを使って、報告用の資料を作ってみた
0air
0
200
生成AIとM5Stack / M5 Japan Tour 2025 Autumn 東京
you
PRO
0
210
OpenAI gpt-oss ファインチューニング入門
kmotohas
2
960
【新卒研修資料】LLM・生成AI研修 / Large Language Model・Generative AI
brainpadpr
23
17k
Goに育てられ開発者向けセキュリティ事業を立ち上げた僕が今向き合う、AI × セキュリティの最前線 / Go Conference 2025
flatt_security
0
350
SoccerNet GSRの紹介と技術応用:選手視点映像を提供するサッカー作戦盤ツール
mixi_engineers
PRO
1
170
いま注目しているデータエンジニアリングの論点
ikkimiyazaki
0
590
GopherCon Tour 概略
logica0419
2
190
E2Eテスト設計_自動化のリアル___Playwrightでの実践とMCPの試み__AIによるテスト観点作成_.pdf
findy_eventslides
0
110
Why Governance Matters: The Key to Reducing Risk Without Slowing Down
sarahjwells
0
110
Flaky Testへの現実解をGoのプロポーザルから考える | Go Conference 2025
upamune
1
420
Featured
See All Featured
A designer walks into a library…
pauljervisheath
209
24k
Six Lessons from altMBA
skipperchong
28
4k
Stop Working from a Prison Cell
hatefulcrawdad
271
21k
Art, The Web, and Tiny UX
lynnandtonic
303
21k
Why You Should Never Use an ORM
jnunemaker
PRO
59
9.6k
Designing Dashboards & Data Visualisations in Web Apps
destraynor
231
53k
Large-scale JavaScript Application Architecture
addyosmani
514
110k
Code Reviewing Like a Champion
maltzj
525
40k
How to train your dragon (web standard)
notwaldorf
96
6.3k
The Cost Of JavaScript in 2023
addyosmani
53
9k
Templates, Plugins, & Blocks: Oh My! Creating the theme that thinks of everything
marktimemedia
31
2.5k
Improving Core Web Vitals using Speculation Rules API
sergeychernyshev
19
1.2k
Transcript
Concurrency 2018.07.18 @at_grandpa Crystal.tokyo #7 in 渋谷
@at_grandpa
圧倒亭グランパのブログ
Concurrency
✔ Concurrency の雰囲気を話します ✔ 細かい syntax などはドキュメント参照
None
“as in Go or Clojure” ✔ Go の goroutine/channel とほぼ同じ
終了!
Concurrency の中身を ちょっと覗いてみましょう
サンプルコード ✔ 並行処理 ✔ 各処理からの値の取得
None
String型のChannelをインスタンス化
2つのFiberを生成
Channel経由で値を取得
2018-07-18 08:12:50 +09:00 start 2018-07-18 08:12:50 +09:00 [fiber 1] start
2018-07-18 08:12:50 +09:00 [fiber 2] start 2018-07-18 08:12:55 +09:00 [top level] value: send from fiber 1 2018-07-18 08:12:55 +09:00 [fiber 1] end 2018-07-18 08:13:00 +09:00 [top level] value: send from fiber 2 2018-07-18 08:13:00 +09:00 end
2018-07-18 08:12:50 +09:00 start 2018-07-18 08:12:50 +09:00 [fiber 1] start
2018-07-18 08:12:50 +09:00 [fiber 2] start 2018-07-18 08:12:55 +09:00 [top level] value: send from fiber 1 2018-07-18 08:12:55 +09:00 [fiber 1] end 2018-07-18 08:13:00 +09:00 [top level] value: send from fiber 2 2018-07-18 08:13:00 +09:00 end ・並行に動いている ・値も取れている
どういう仕組みで動いているか
✔ Fiber ✔ Runtime Scheduler ✔ Event Loop ✔ Channel
✔ IO::Syscall Concurrencyを理解するポイント
Fiber ✔ Process ⊃ Thread ⊃ Fiber ✔ 協調マルチタスク -
Fiber自ら、処理を他のFiberに委譲する - 1つのFiberが固まるとシステム全体が固まる ✔ Crystalの処理は全てFiberで行われている - 「Main Fiber」でメインの処理を実行している
Runtime Scheduler ✔ Fiberの切り替えを担当 ✔ クラス変数にFiberのqueueを持っている - @@runnables = Deque(Fiber).new
- 実行可能Fiberのqueue ✔ Scheduler.rescheduleで切り替え
Event Loop ✔ I/O処理の委譲先 ✔ 委譲している間に別のFiberを実行できる ✔ I/O処理が終了したら委譲元のFiberに移る
Channel ✔ Fiber間のデータのやりとり ✔ 送信元Fiberや受信先Fiberを保持 - @senders = Deque(Fiber).new -
@receivers = Deque(Fiber).new ✔ 送受信時にFiberを切り替え - Runtime Scheduler を使う
IO::Syscall ✔ 以下でincludeされている - Crystal::System::FileDescriptor - Socket ✔ read/writeでFiber切り替え -
Runtime Scheduler を使う ほぼ全てのI/Oを網羅
実際の動き追う
None
Channelをインスタンス化
・Fiber1を定義 ・Runtime Scheduler の 実行可能Fiberのqueueに Fiber1が enqueue される
concurrency.cr ・Fiber1を定義 ・Runtime Scheduler の 実行可能Fiberのqueueに Fiber1が enqueue される
・Fiber2を定義 ・Runtime Scheduler の 実行可能Fiberのqueueに Fiber2が enqueue される
・実際の処理はここから開始 ・Top Level のコードは 「Main Fiber」で動いている ・Channelの送受信時には Fiberの切り替えが行われる
・実際の処理はここから開始 ・Top Level のコードは 「Main Fiber」で動いている ・Channelの送受信時には Fiberの切り替えが行われる ・Runtime Scheduler
の 実行可能Fiberのqueue からshift ・Fiber1に処理が移る
・Fiber1に処理が移った
・sleep
concurrency.cr
concurrency.cr fiber.cr
concurrency.cr fiber.cr ・Event Loop に処理を委譲 ・Runtime Scheduler で queueの次のFiber切り替え
concurrency.cr fiber.cr ・Event Loop に処理を委譲 ・Runtime Scheduler で queueの次のFiber切り替え ・Fiber2へ移る
・Fiber2に処理が移った
・同じくFiber切り替え ・しかし、もう 実行可能Fiberのqueueには Fiberが存在しない ・I/O処理を待機するしかない
待機中 . . .
・Event Loop が sleep 5 の 終了を検知 ・処理中のFiberが他にいないので Fiber1の処理が再開される
・Channelに値を送信 ・sendの場合はreceiveを 呼んだFiberに切り替え ・Main Fiber に切り替わる ・このとき、sendしたFiberを Schedulerのqueueにenqueue
・Channelに値を送信 ・sendの場合はreceiveを 呼んだFiberに切り替え ・Main Fiber に切り替わる ・このとき、sendしたFiberを Schedulerのqueueにenqueue
・受信された値を表示
・Schedulerの 実行可能Fiberのqueueを元に Fiberの切り替え ・queueにはsendした際に enqueueされたFiber1が入っている
・Schedulerの 実行可能Fiberのqueueを元に Fiberの切り替え ・queueにはsendした際に enqueueされたFiber1が入っている ・Fiber1が再開
・値の表示
・Fiber1のブロックが終了 ・Fiberの切り替えが発生 ・しかし、Schedulerの queueには実行可能Fiberが 存在しない
待機中 . . .
・Event Loop が sleep 10 の 終了を検知 ・処理中のFiberが他にいないので Fiber2に処理が戻る
・Channelに値を送信 ・sendの場合はreceiveを 呼んだFiberに切り替え ・Main Fiber に切り替わる ・このとき、sendしたFiberを Schedulerのqueueにenqueue
・Channelに値を送信 ・sendの場合はreceiveを 呼んだFiberに切り替え ・Main Fiber に切り替わる ・このとき、sendしたFiberを Schedulerのqueueにenqueue
・受信された値を表示
・そのまま終了
・そのまま終了 ・ここは通らない
・そのまま終了 ・ここは通らない 2018-07-18 08:12:50 +09:00 start 2018-07-18 08:12:50 +09:00 [fiber
1] start 2018-07-18 08:12:50 +09:00 [fiber 2] start 2018-07-18 08:12:55 +09:00 [top level] value: send from fiber 1 2018-07-18 08:12:55 +09:00 [fiber 1] end 2018-07-18 08:13:00 +09:00 [top level] value: send from fiber 2 2018-07-18 08:13:00 +09:00 end [fiber 2] end は表示されてない
複雑!
とはいえ ✔ Concurrencyに必要な役者を知る - Fiber, Runtime Scheduler, Event loop, Channel
✔ Fiberが切り替わるタイミングを知る - I/Oの場合 - 実行可能Fiber-queueからshift - receiveの場合 - 実行可能Fiber-queueからshift - sendしたFiberをqueueにenqueue - sendの場合 - receiveしたFiberに切り替え これらを知るだけで、だいぶ変わる
まとめ
✔ 並行処理 ✔ Concurrencyに必要な役者を知ろう ✔ Fiberを切り替えるタイミングを知ろう Concurrency
✔ 立て続けにsendされたらどうなるの? - sendされた値もqueueに保存される - receiveを呼ぶ度にqueueからshift ✔ Fiber内でI/O以外の重い処理があったら? - 委譲できない処理はそのまま処理される
- その処理が終わるまで他のFiberは実行できない ✔ 入れ子spawnとかどうなるんだろう? - \(^o^)/ まだまだあるよ
Happy Crystalling ! fin