Share
Embed
Transcript
55 slides
-
$ cat me.txt 自己紹介 ▼ 名前 本田 雄亮 ▼ 所属企業
▼ Xアカウント @yyh_gl 妻作のイルカとお届け -
$ cat agenda.txt アジェンダ 1. 2. 3. 4. 再現しない並行処理の不具合 Lincheckを使った並行処理テスト
suspend関数のテスト まとめ $ open lincheck.slide 7 -
実行してみると 同じコードなのに実行するたびに結果が異なる。 1回目: 20,000 2回目: 18,756 ← !? 3回目: 20,000
並行処理ではあるあるな不具合。 今日はすぐ直った! PCの機嫌がいいみたい! 実行のたびに結果が変わる処理がテストに紛れ込むと 「たまに落ちるテスト」ができあがる。 そんなとき、我々は "祈る"。 11 -
counter++ の裏側 counter++ は1つの操作ではない。 実際には3つのステップに分かれて実行される。 1. counterの現在値を読む(read) 2. 読んだ値に1を足す(add) 3.
結果をcounterへ書き戻す(write) 15 -
実行順序①: 想定通りの挙動 Thread 1がread→add→writeを完了させてから Thread 2が同じ処理を行うと 2回のインクリメントがどちらも反映される。 順 Thread 1
1 read → 0 0 2 add → 1 0 3 write 1 1 Thread 2 counter 4 read → 1 1 5 add → 2 1 6 write 2 2 16 -
実行順序②: 想定とは異なる挙動 次の順序で交互に実行されると 片方のインクリメントが消えたように見える(ロストアップデート)。 順 Thread 1 1 read →
0 2 3 6 counter 0 read → 0 add → 1 4 5 Thread 2 0 0 add → 1 write 1 0 1 write 1 1 17 -
戦略①:モデル検査( Model checking) 実行環境のスケジューラに任せず、Lincheckがスレッドの切り替えを 制御。 本制御を通して系統的に探索する戦略。 • 運に頼らない ◦ 同じ入力なら必ず同じ結果になる(決定的)ので
見つけた不具合を確実に再現可能 • 失敗時は「どの順序で壊れたか」のトレースを出力 25 -
戦略②:ストレステスト( Stress testing) Lincheckがスレッドの切り替えを制御せず、 様々なテストシナリオを大量に実行し、多様な実行順序を 引き当てにいく戦略。 • 実環境に近い挙動を確認できる • モデル検査と比較して、
実行スピードが速いので同一時間あたりの試行回数を増やせる • 確率的な探索であり、網羅性および再現性は保証されない 26 -
2つの戦略の使い分け モデル検査を主軸に、ストレステストの併用を推奨。 モデル検査 ストレステスト 探索方法 順序を制御して系統的に探索 大量に実行して 確率的に探索(順序制御なし) スピード ストレステストより遅い
モデル検査より速い 再現性 高い(決定的) 低い(確率的) 失敗トレース あり なし 向いている用途 ロジックの 不具合検出・デバッグ 実環境に近い挙動の確認 27 -
探索は証明ではない モデル検査もストレステストも、探索には限りがある。 • モデル検査 ◦ 探索には上限があり、常に全順序を網羅できるわけではない ◦ 特性上、検知できない不具合がある ▪ 逐次一貫性のあるメモリモデルを前提としており、
そのモデルの範囲外の不具合 など • ストレステスト ◦ 確率的な探索であり、十分な試行回数がなければ 不具合を引き当てられない 不具合を検知できない可能性(偽陰性)がある 28 -
コードを例に説明 実行すると (r1, r2) の値は 以下のいずれかになる。 • • • •
(1, 1) (1, 2) (2, 1) (2, 2) このような結果をもたらす 逐次実行方法があるかを見る。 33 -
どんな逐次実行があるかチェック (a) 1つ目の inc() が先に実行され、 続いて、2つ目の inc() が 実行される。 (b)
2つ目の inc() が先に実行され、 続いて、1つ目の inc() が 実行される。 この2通りが存在。 (これがすべて) 34 -
逐次実行で再現可能かチェック 並行実行時に得られる r1とr2の値の組み合わせ (r1, r2) について • (1, 2) は
(a) の逐次実行で再現可能 • (2, 1) は (b) の逐次実行で再現可能 • (1, 1) と (2, 2) は どの逐次実行でも再現不可能 Lincheckが不具合を検知! 35 -
suspendする関数のテストは難しい? 例として、Channel の send と receive を見てみる。 send と receive
を並行に実行すると両方とも成功する。 しかし、逐次実行すると、どちらを先に呼んでも 相手がいないためサスペンドしたまま処理が進まない。 つまり、並行実行の結果を再現できる逐次実行が存在せず、 従来の線形化可能性では判定できない。 38 -
Lincheckのアプローチ Dual Data Structures理論に基づき、 サスペンドする操作を別の視点で捉える。 操作を以下の通り分解。 • 要求の登録(request) • 再開・完了(follow-up)
本分離により逐次実行の結果と 比較できるようになり、 線形化可能性の判定が行える。 39 -
まとめ • 並行処理の不具合は再現しにくい ◦ 原因は実行順序の組み合わせ爆発 • Lincheckを使った並行処理テスト ◦ モデル検査とストレステストで様々な実行順序を探索 ◦
正しさは線形化可能性で定義 • suspend関数も検証可能 ◦ 「要求の登録」と「再開・完了」に分解 (Dual Data Structures理論) 祈るテストから、探索するテストへ 41 -
参考資料 • • • • • • • JetBrains. "Overview".
Kotlin Documentation. 出版年不明, (参照 2026-11-03). Nikita Koval. "How we test concurrent algorithms in Kotlin Coroutines by Nikita Koval". YouTube (Kotlin by JetBrains). 2023, (参照 2026-11-03). Maria Sokolova. "Workshop. Lincheck: Testing concurrency on the JVM (Part 1)". YouTube (Hydra). 2021, (参照 2026-11-03). Maria Sokolova. "Workshop. Lincheck: Testing concurrency on the JVM (Part 2)". YouTube (Hydra). 2021, (参照 2026-11-03). Nikita Koval, et al. "Lincheck: A Practical Framework for Testing Concurrent Data Structures on JVM". Computer Aided Verification (CAV 2023) Part I. Lecture Notes in Computer Science, vol.13964. Constantin Enea, Akash Lal編. Cham, Springer, 2023, p.156-169. DOI: 10.1007/978-3-031-37706-8_8. Maurice P. Herlihy, Jeannette M. Wing. "Linearizability: A Correctness Condition for Concurrent Objects". ACM Transactions on Programming Languages and Systems. 1990, vol.12, no.3, p.463-492. DOI: 10.1145/78969.78972. William N. Scherer III, Michael L. Scott. "Nonblocking Concurrent Data Structures with Condition Synchronization". Distributed Computing (DISC 2004). Lecture Notes in Computer Science, vol.3274. Rachid Guerraoui編. Berlin, Heidelberg, Springer, 2004, p.174-187. DOI: 10.1007/978-3-540-30186-8_13. -
残りは全部 Lincheckがやる 宣言した操作からLincheckがテストを行う。 1. シナリオ生成:各スレッドで呼ぶ操作と引数の組み合わせを 自動生成 2. 実行:モデル検査またはストレステストで 様々な実行順序(インターリービング)を探索 3.
判定:線形化可能かをチェック 「どう探索し、どう判定するか」はフレームワークの仕事。 開発者は「何をテストするか」だけを書けばよい。 48 -
Lincheckの注意点・制約 • モデル検査 ◦ 前提とするメモリモデルの制約 ◦ ファイルやソケットなどのI/O呼び出しに非対応 • 実行時間:探索するため、通常のユニットテストより時間がかかる •
偽陰性のリスク:探索範囲(iterations/invocations)を 小さくすると不具合を見逃す ◦ CIの実行時間とのトレードオフになる 53 -
線形化可能性の補足 • 並行システムの実行は履歴によってモデル化される ◦ 履歴とは、操作の呼び出しおよび応答イベントの 有限なシーケンスのこと • 実行区間が被らない操作同士は実行順序を必ず守る ◦ 実行区間が被る=並行実行
◦ 実行区間が被らないなら、どちらが先に実行されたかは明確 54