IP66_EvacuationLearning

第66回土木計画学研究発表会・秋大会の発表資料です。「異質性に着目した強化学習に基づく動的避難目的地選択モデル」

Transcript

1. ҟ࣭ੑʹண໨ͨ͠ڧԽֶशʹجͮ͘ ಈతආ೉໨త஍બ୒Ϟσϧ ˓ ૿ా ܛथ ౦ژେֶ޻ֶܥݚڀՊ ஑֋ ະདྷ גࣜձࣾ๛ాதԝݚڀॴ Ӌ౻ ӳೋ ౦ژେֶ޻ֶܥݚڀՊ 12 ަ௨ωοτϫʔΫ෼ੳηογϣϯ 2022.11.12 16:45-18:15 ୈ9ձ৔ ୈճ౔໦ܭըֶݚڀൃදձɾळେձ!ླྀٿେֶ
2. ආ೉ͷωοτϫʔΫσβΠϯɾ੍ޚ 2 ࡂ֐࣌ʹ͸ಥൃతͳधཁ͕ൃੜ͠ɺωοτϫʔΫ༰ྔΛ௒ա ةݥେ ةݥத ةݥখ
3. ආ೉ͷωοτϫʔΫσβΠϯɾ੍ޚ Øࡂ֐࣌ͷ৘ใఏڙσβΠϯ Øࡂؒͷආ೉܇࿅ͷ࠷దઃܭ 3 બ޷ͷҟ࣭ੑΛ׆༻ͨ͠ආ೉ަ௨ͷ૊Έ߹Θͤ࠷ద໰୊ ةݥେ ةݥத ةݥখ ৘ใͷֶशաఔͱߦಈม༰ΛϞσϧԽ͠ɺ੍ޚʹ׆༻͢Δ
4. ֶशաఔͷදݱ – ڧԽֶश ΤʔδΣϯτ͕ڧԽֶशΛߦ͏ͱ͢Δͱɺ ߦಈͱใुͷ֫ಘΛ܁Γฦ͠ɺ࠷దͳํࡦΛֶश͍ͯ͘͠ → ʮඇආ೉ʯঢ়ଶʹ͋Δ࣌ɺظ଴ใु͕࠷΋ߴ͍ঢ়ଶભҠΛֶश 4 ࣌ؒ ֶशᶃ ආ೉ޮ༻ 𝑣 ආ೉ ᶄ Ұํɺਓؒ͸؀ڥ͔Β࠷దํࡦΛֶ͹ͳ͍͜ͱ΍ɺֶशΛ๨٫ ͢Δ͜ͱ͕͋Δɻ
5. ֶशաఔͷදݱ – day-to-dayͷܦ࿏બ୒ ܦ࿏બ୒ߦಈʹؔ͢Δ࣮ݧ࣮ࣨݧͷݚڀ͕ߦΘΕ͖ͯͨ • ܁Γฦ͠ʹΑΔश׳Խ Bogers, Bierlaire, Hoogendoorn (2007) • ϕΠζϧʔϧʹΑΔೝ஌ͷߋ৽ Jha, Madanat, Peeta (1998) • Horowitz (1984) – ֶशʹΑΔ஌ཱྀ֮ߦ࣌ؒͷܗ੒Λදݱ 5 𝑢!" = 𝛽#!$% $ & "'( 𝑤& 𝑇!& + 𝜖!" աڈͷཱྀߦ࣌ؒͷॏΈ෇͖ฏۉ 𝑤& ͷઃఆʹΑΓ͞·͟·ͳදݱ͕Մೳɻ ex) ͍ۙաڈͷܦݧ΄ͲॏΈ෇͚ ü ॏΈ 𝑤& ͸෼ੳऀ͕ઃఆ͢Δ ü ࡂ֐΍܇࿅͸ຖ೔܁Γฦ͞ΕΔֶशͰ͸ͳ͍ ຊݚڀͰ͸𝑤! Λ๨٫཰ͱଊ͑ɺೝ஌΍ֶशաఔΛද͢ॏཁͳ ύϥϝʔλͱͯ͠ਪఆ͢Δ
6. ຊݚڀͷয఺ ໨త ৘ใͷֶशͱ๨٫Λߟྀͨ͠ආ೉ωοτϫʔΫ੍ޚ nڧԽֶशɾday-to-dayͷܦ࿏બ୒ͷֶश • աڈͷܦݧ΍֎෦৘ใʹΑΔ஌֮΍ߦಈنൣܗ੒ Øֶशִ͕ؒ௕͍৔߹ͷɺֶशͱ๨٫ͷهड़ͱ༧ଌ͕ඞཁ n ආ೉ߦಈͷ෼ੳ • ܇࿅΍৘ใఏڙલޙͷҙ޲มԽͷ෼ੳ ØޮՌͷ࣋ଓͷ෼ੳ͕ෆՄܽ ࡂ֐͸كগࣄ৅Ώֶ͑शͱ๨٫ΛϞσϦϯά͠ɺ࣮ݧσʔλʹΑΔ ύϥϝʔλਪఆͰֶशաఔͷಛ௃Λ໌Β͔ʹ͢Δɻ 6
7. ֶशաఔͷදݱ 7 ࣌ؒ ֶशᶃ 𝑣) ࣌ؒͱͱ΋ʹޮՌ͸௿ݮ  ๨٫ ආ೉ޮ༻ 𝑣 ආ೉
8. ֶशաఔͷදݱ 8 ࣌ؒ ෼ੳ࣌఺ 𝑣) ࣌ؒͱͱ΋ʹޮՌ͸௿ݮ 
   ๨٫ ආ೉ޮ༻ 𝑣 ආ೉ ֶशᶃ
9. ֶशաఔͷදݱ 9 ආ೉ޮ༻ 𝑣 ආ೉ ࣌ؒ ෼ੳ࣌఺ 𝑣) 𝜆 𝑣避難 = 𝑣" +𝜆𝛿学習 ֶशޮՌൈ͖ͷ ޮ༻ͷ֬ఆ߲ ֶशܦݧ͕͋Ε͹ ͳ͚Ε͹ͷม਺ ֶशᶃ
10. ֶशաఔͷදݱ 10 ࣌ؒ ෼ੳ࣌఺ 𝑣) 𝜆 ਅͷޮՌ 𝑣避難 = 𝑣" +𝜆𝛿学習 ֶशޮՌൈ͖ͷ ޮ༻ͷ֬ఆ߲ ֶशܦݧ͕͋Ε͹ ͳ͚Ε͹ͷม਺ ආ೉ޮ༻ 𝑣 ආ೉ ܦݧΛ୯७ʹઆ໌ม਺ʹؚΊΔ͚ͩͰ͸ ֶशͷޮՌΛաখධՁͯ͠͠·͏ ֶशᶃ
11. ֶशաఔͷදݱ – ఏҊ 11 ࣌ؒ ֶशᶃ ̅ 𝜆 ආ೉ޮ༻ 𝑣 ආ೉ ෼ੳ࣌఺ ୯Ґ࣌ؒ 𝑣)
12. ֶशաఔͷදݱ – ఏҊ 12 ࣌ؒ 𝑣) ̅ 𝜆 ආ೉ޮ༻ 𝑣 ආ೉ ෼ੳ࣌఺ 𝛾 ̅ 𝜆 𝛾* ̅ 𝜆 𝛾+ ̅ 𝜆 ෼ੳ࣌఺Ͱͷ ֶशᶃͷޮՌ 𝑣避難 = 𝑣" +𝛾# ̅ 𝜆𝛿学習① ֶशᶃ͕͋Ε͹ ͳ͚Ε͹ͷม਺ ๨٫ͷఔ౓Λද͢ม਺𝛾Λಋೖ ֶशᶃ ୯Ґ࣌ؒ
13. ֶशաఔͷදݱ ʻԾఆʼ • Կ౓ֶशΛ܁Γฦͯ͠΋ɺͦͷޮՌ͸ ̅ 𝜆Ͱݻఆ • ֶशͷִؒ͸΄΅ҰఆͰɺwaveؒͰ͸๨٫཰ 𝛾ͰޮՌ͕௿ݮ͢Δ 13 𝑣避難 = 𝑣" +𝛾!$% ̅ 𝜆𝛿&'() % + 𝛾!$* ̅ 𝜆𝛿&'() * + 𝛾!$# ̅ 𝜆𝛿&'() # + ⋯ = 𝑣" + ̅ 𝜆 * +,% ! 𝛾!$+𝛿+ • ਪఆର৅͸ɺ ̅ 𝜆ʢֶशʹΑΔޮՌʣͱ 𝛾ʢ๨٫཰ʣ શ 𝑥 wave͋Δͱ͖ɺwave 𝑥ޙͷޮ༻ͷ֬ఆ߲͸ɺ
14. ֶशσʔλͷऔಘ • ෳ਺waveͷߦಈσʔλ͕͋Ε͹๨٫΍܇࿅ޮՌͷਪఆ͕Մೳ 14 ࠞࡶ৘ใ ආ೉܇࿅ ආ೉܇࿅ ආ೉܇࿅ ࠞࡶ৘ใ ਁਫ৘ใ ආ೉܇࿅ ࠞࡶ৘ใ ਁਫ৘ใ ආ೉ߦಈ SPௐࠪᶃ 2022/3/2 ~ 4 ආ೉ߦಈ SPௐࠪᶄ 2022/3/11 ~ 15 ආ೉ߦಈ SPௐࠪᶅ 2022/3/25 ~ 29 ආ೉ߦಈ SPௐࠪᶆ 2022/4/14 ~ 20 ࠞࡶ৘ใ ਁਫ৘ใ 272໊
15. ܇࿅ͱ৘ใఏڙͷ༷ࢠ 15 1 2 3 ᶃେౡஸ໨ஂ஍ ϋβʔυ৘ใ ྟւ෦ͷ΄͏͕ਫ֐ ʹରͯ҆͠શͱ͍͏ ͷ͸௚ײͱҧ͏ɻ ॳΊͯ஌ͬͨɻ ਁਫҬʹॅΉߴྸঁੑ
16. ආ೉໨త஍બ୒Ϟσϧ – 2ͭͷಈֶੑ 16 ࣗ୐ ආ೉ॴ A ආ೉ॴ B wave1 wave2 ࡂ֐࣌ 
    ಈత཭ࢄબ୒Ϟσϧ ආ೉ܦݧ ࡂ֐ؒ 
    ޮ༻ͷߋ৽ 𝑝 𝑠!"# 𝑠! = 𝑒 # $ % 𝑠!"# 𝑠! ; 𝜽 "&'! ("#$ ∑ ("#$ % ∈* (" 𝑒 # $ % 𝑠!"# + 𝑠! ; 𝜽 "&'! ("#$ % 𝑣!"# = 𝑣$ + 𝜆 % %,&' % 𝛾%(%, 𝛿% wave間 wave಺
17. waveؒ ֶशύϥϝʔλͷਪఆ 17 wave1避難者 wave1非避難者 推定値 t値 推定値 t値 非避難効用の変化 (出発時刻選択) 48h前固有項 0.362 2.08* 0.224 0.73 24h前固有項 0.344 1.85 0.862 2.25* 12h前固有項 -0.303 -1.28 -1.541 -1.89 6h前固有項 -1.236 -3.39** 2.173 2.08* 目的地効用の変化 ハザードマップ内 -0.683 -1.40 -1.128 -1.59 避難訓練参加 (自宅選択時) -0.580 -1.05 0.004 0.01 目的地の混雑情報 (非自宅選択時) -0.433 -1.38 -2.017 -2.86** 記憶率 0.143 0.48 0.321 1.20 サンプル数 100 144 初期対数尤度 -723.9 -290.0 最終対数尤度 -682.2 -197.8 尤度比 0.058 0.318 修正済尤度比 0.047 0.290 *:5%有意, **1%有意 • wave1Ͱආ೉͢Δͱճ౴ͨ͠ਓͱͦ͏Ͱͳ͍ਓʹ෼͚ͯਪఆ ආ೉ͷબ޷͕ݩ͔ Β௿͍ਓ͸ɺ܇࿅ ࢀՃͷޮՌ͕ೝΊ ΒΕͳ͍͕ɺࠞࡶ Λආ͚Α͏ͱ͢Δ ̅ 𝜆 𝛾 忘却率
18. waveؒ ֶशύϥϝʔλͷਪఆ 18 EMクラス1 EMクラス2 推定値 t値 推定値 t値 非避難効用の変化 (出発時刻選択) 48h前固有項 11.871 0.10 -0.053 -0.30 24h前固有項 0.369 2.14* 0.237 1.11 12h前固有項 -8.180 -0.15 0.143 0.63 6h前固有項 8.740 0.15 -2.449 -5.46** 目的地効用の変化 ハザードマップ内 -2.144 -2.28* 0.847 1.41 避難訓練参加 (自宅選択時) -1.902 -2.20* -0.629 -0.74 目的地の混雑情報 (非自宅選択時) -3.598 -3.09** 0.028 0.08 記憶率 1 4.15** 0.213 1.17 サンプル数 100 初期対数尤度 -723.9 最終対数尤度 -571.7 尤度比 0.210 修正済尤度比 0.188 *:5%有意, **1%有意 Ϋϥε1 = • ਁਫ͢Δॴʹߦ͖ͨ ͘ͳ͍ • ܇࿅ࢀՃʹΑΓආ೉ ޮ༻্͕ঢ͢Δ • ࠞࡶ͢Δॴʹߦ͖ͨ ͘ͳ͍ ͱֶश͢Δ໛ൣ૚ Ϋϥε2 = ৘ใఏڙʹײ౓͕ͳ͍૚ • wave1Ͱආ೉͢Δͱճ౴ͨ͠ਓͷதʹ΋ҟ࣭ੑ͕͋Δͱߟ͑ɺજ ࡏΫϥεϞσϧͰਪఆ ̅ 𝜆 𝛾 忘却率
19. ආ೉܇࿅ࢀՃʹΑΔආ೉ޮ༻ͷมԽ 19 ࣌ؒ ආ೉܇࿅ᶃ ආ೉܇࿅ᶄ 𝑣) ආ೉ޮ༻ 𝑣 ආ೉ 2िؒ −3.60 -0.63 Ϋϥε1 Ϋϥε2
20. ࠞࡶ৘ใఏڙʹΑΔ໨త஍ޮ༻ͷมԽ 20 ࣌ؒ ৘ใఏڙᶃ ৘ใఏڙᶄ ආ೉ޮ༻ 𝑣 ආ೉ 2िؒ −1.90 0.03 Ϋϥε1 Ϋϥε2
21. ·ͱΊ üكগࣄ৅ʹର͢Δֶशͱ๨٫ͷաఔΛϞσϧԽ ü࣮ݧσʔλʹΑΔύϥϝʔλਪఆͰ܇࿅ͱ৘ใͷֶशաఔΛ෼ੳ ü৘ใఏڙ΍ܦݧʹର͢Δֶशͷఔ౓ͱɺ๨٫ͷ଎͞ʹ͸ҟ࣭ੑ͕ ͋Δ͜ͱΛ໌Β͔ʹͨ͠ ࠓޙͷํ޲ੑ Ø৘ใఏڙʹର͢Δ൓Ԡͷҟ࣭ੑΛར༻ͯ͠ɺආ೉ަ௨ͷधཁɾܦ ࿏ɾ໨త஍ͷ࠷ద੍ޚ΁ൃల Ø๨٫཰ͷԾఆͷ؇࿨ → ܦա࣌ؒͷߏ଄Խɺม਺͝ͱʹҟͳΔ๨٫཰ͷઃఆ 21