Python アプリケーションの裏側とその機序 -WSGI, ASGI 編-

Transcript

1. ͻΉΒ 1ZUIPO
   ΞϓϦέʔγϣϯͷཪଆͱͦͷػং
   84(*
   "4(*
   ฤ 2025.5.31 1
2. ͓࿳ͼ Gomen 2025.5.31 2 ͓࿳ͼ
3. %PDLFS
   ͷ࿩·ͰḷΓண͚ͳ͔ͬͨʜ Moushiwakenai 2025.5.31 5 ͓࿳ͼ 3
4. 8FC
   ΞϓϦέʔγϣϯͷཪଆ Web Application Backyard 2025.5.31 4 8FC
   ΞϓϦͷཪଆ
5. 8FC
   ͷ࢓૊Έ How web works 2025.5.31 5 8FC
   ΞϓϦͷཪଆ 5 Ϣʔβʔ͕ϒϥ΢βʹΞΫηε͢Δͱ͖ɺཪଆͰ͸Կ͕ى͍ͬͯ͜Δʁ ૉ๿ͳٙ໰
6. 8FC
   ͷ࢓૊Έ How web works 2025.5.31 5 8FC
   ΞϓϦͷཪଆ 6 URL Web Server Browser HTTP HTML DB ੩తίϯςϯπΛ഑৴͢Δ৔߹ nginx apache
7. 8FC
   ͷ࢓૊Έ How web works 2025.5.31 5 8FC
   ΞϓϦͷཪଆ 7 Web Server Browser HTTP HTML ಈతίϯςϯπΛ഑৴͢Δ৔߹ Application Server HTTP HTML DB WebSocket Frame WebSocket Frame
8. ίϯϐϡʔλͷཪଆ Computer Backyard 2025.5.31 8 ίϯϐϡʔλͷཪଆ
9. ύιίϯങ͏࣌ͱ͔ʜ Buying new PC 2025.5.31 5 ίϯϐϡʔλͷཪଆ 9
10. ύιίϯങ͏࣌ͱ͔ʜ Buying new PC 2025.5.31 5 ίϯϐϡʔλͷཪଆ 10
11. $16
    ͷཪଆ CPU backyard 2025.5.31 5 ίϯϐϡʔλͷཪଆ 11 CPU ίΞ਺ ্ͷྫͰ͸
    
    ίΞ Web Server εϨου਺ ্ͷྫͰ͸
    
    ίΞ Memory CPU(non-SMT) Core Core Core ϓϩηε $16
    ࣌ؒ୯ҐͰׂΓৼΒΕΔ
    ϓϩάϥϜͷ࣮ߦ୯Ґ εϨου $16
    Λར༻͢ΔͨΊͷ࣮ߦ୯Ґ
    ࠷খॲཧ୯Ґ Process Thread Thread Thread Process Thread Core
12. ϓϩηεͷத਎ Process backyard 2025.5.31 5 ίϯϐϡʔλͷཪଆ 12 Memory Process Text Segment Data Segment Process Text Segment Data Segment Text Segment Data Segment ϓϩάϥϜͷ໋ྩྻ
    ΋ͪΖΜ໋ྩ͸ػցޠ
    3FBE0OMZ ɾ11%"
    1FS
    1SPDFTT
    %BUB
    "SFB
    ε λ ο Ϋ ϙΠ ϯ λɺ ϓ ϩ ά ϥϜ Χ ΢ ϯ λ ͳ ͲΧʔωϧͷ࣮ߦ৘ใΛอ࣋͢Δ
    ɾσʔλྖҬ
    ɹɾ੩తྖҬ
    ɹఆ਺΍άϩʔόϧม਺
    ɹɾώʔϓྖҬ
    ɹ௨ৗͷม਺ͳͲ
    ɾελοΫྖҬ
    Ҿ਺΍ϩʔΧϧείʔϓͳͲͷҰ࣌σʔλ
13. 8FC
    αʔόͷཪଆ Web Server Backyard 2025.5.31 13 8FC
    αʔόͷཪଆ
14. 8FC
    ͷฒྻॲཧ Parallel Processing 2025.5.31 5 8FC
    ΞϓϦͷཪଆ 14 ʮαʔό͕ෳ਺্ཱ͕͍ͪͬͯΔʯ
    ʮϫʔΧ͕ϝϞϦΛ৯͍௵ͯ͠ࢮΜͩʯ ˢԿͷ࿩ʁʁ
15. Ϛϧνϓϩηε Multi Process 2025.5.31 5 8FC
    αʔόͷཪଆ 15 Memory ਌Process Text Segment Data Segment ࢠProcess Data Segment ෳ਺ͷϓϩηεΛฒྻॲཧ͢Δ͜ͱ ࢠϓϩηεΛෳ਺্ཱͪ͛ͯฒྻʹಈ͔͢
    σʔληάϝϯτͷΈίϐʔ͢Δ ίϐʔ ɾϓϩηεؒͷϝϞϦΛ௚઀ࢀরͰ͖ͳ͍
16. ϚϧνεϨου Multi Thread 2025.5.31 5 8FC
    αʔόͷཪଆ 16 Memory ਌Process Text Segment Data Segment Thread ϓϩηε͔ΒεϨουΛੜ੒͢Δ ਌ϓϩηεͷྖҬ಺ʹεϨουΛෳ਺্ཱͪ͛ͯ
    ฒྻʹಈ͔͢ Stack Area Stack Area ίϐʔ ɾϝϞϦۭ͕֤ؒεϨουͷؒͰڞ༗Մೳ
    ɾϝϞϦۭؒͷ੾Γସ͕͑গͳ͍෼ɺϝϞϦফඅྔ΍
    ɹίϯςΩετεΠονͷΦʔόʔϔου͕খ͍͞
17. 8FC
    αʔόͷΞʔΩςΫνϟ
    .1. Web Server Architecture 2025.5.31 17 8FC
    αʔόͷΞʔΩςΫνϟ
18. QSFGPSL prefork 2025.5.31 5 8FC
    αʔόͷΞʔΩςΫνϟ 18 Web Server BQBDIF
    ͰσϑΥϧτͰ࠾༻
    Ϛϧνϓϩηε
    ϦΫΤετͱϓϩηε͕ରͰରԠ
    ͭͷϓϩηε่͕յͯ͠΋ଞͷϓϩηε͸ແࣄ
    αʔό͸ৗʹز͔ͭͷΞΠυϧͳαʔόϓϩηεΛҡ͍࣋ͯͯ͠ɺ
    ͦΕΒ͸ೖ͖ͬͯͨϦΫΤετʹԠ౴Ͱ͖ΔΑ͏ʹ଴ػ͍ͯ͠Δ
    ͜ͷΑ͏ʹͯ͠ΫϥΠΞϯτ͸ɺϦΫΤετ͕Ԡ౴͞ΕΔલʹ৽͍͠ࢠϓϩηε͕
    GPSL
    ͞ΕΔͷΛ଴ͨͳͯ͘΋Α͍Α͏ʹͳ͍ͬͯΔʢQSFGPSLʣ
19. XPSLFS worker 2025.5.31 5 8FC
    αʔόͷΞʔΩςΫνϟ 19 Web Server ϚϧνϓϩηεͱϚϧνεϨουͷϋΠϒϦουܕ
    ֤ࢠϓϩηε಺Ͱෳ਺ͷεϨου͕ฒྻ࣮ߦ
    ϦΫΤετͱεϨου͕ରͰରԠ
    αʔό͸ৗʹز͔ͭͷΞΠυϧͳαʔόεϨουͷϓʔϧΛৗʹҡ͍࣋ͯͯ͠
    ͦΕΒ͸ೖͬͯ͘ΔϦΫΤετʹԠ͑ΒΕΔΑ͏ʹ଴ػ͍ͯ͠Δ
    ىಈॳظ࣌ͷϓϩηε૯਺͸
    StartServers σΟϨΫςΟϒͰઃఆ͞ΕΔ
    Քಇதʹαʔό͸શϓϩηεͷΞΠυϧεϨουͷ߹ܭ਺Λݟੵ΋Γ
    MinSpareThreads ͱ .BY4QBSF5ISFBET Ͱࢦఆ͞Εͨൣғͷதʹ
    ͜ͷ਺͕ऩ·ΔΑ͏ʹ
    GPSL
    ͨ͠Γ
    LJMM
    ͨ͠Γͯ͠͏·͍͜ͱௐ੔͢Δ
20. $L
    ໰୊ C10k Problem 2025.5.31 5 8FC
    αʔόͷΞʔΩςΫνϟ 20 ϚϧνϓϩηεϚϧνεϨουؔ܎ͳ͘ಉ࣌઀ଓ਺͕૿͑Δ͜ͱʹΑΓ
    ϝϞϦ͕ѹഭ͞ΕΔઃܭ prefork,
    worker ͩͱ
    Ͳ͏ͯ͠΋ಉ࣌઀ଓ਺ͷ૿Ճʹ൐ͬͯαʔό͕ࢮ͵
21. FWFOU event 2025.5.31 5 8FC
    αʔόͷΞʔΩςΫνϟ 21 Web Server OHJOY
    Ͱ࠾༻͞Ε͍ͯΔʢBQBDIF
    Ͱ΋
    3)&-
    ͔ΒσϑΥϧτʹʣ
    ΫϥΠΞϯτ͔ΒͷϦΫΤετΛΠϕϯτͱͯ͠ѻ͍
    ͦΕΛτϦΨʔʹϓϩηε಺ͰϋϯυϦϯά͢Δ
    ΠϕϯτϧʔϓʹΑΔඇಉظͳΠϕϯτۦಈͱ
    *0
    ଟॏԽʹΑΔϦΫΤετͷฒߦॲཧ
    $L
    ໰୊ʹରॲ
    ίϯςΩετεΠον͸ൃੜ͠ͳ͍ʢγϯάϧεϨουʣ γϯάϧεϨου͕ނʹϝϞϦϦʔΫΛىͨ͜͠৔߹ʹ
    શϦΫΤετ͕ר͖ఴ͑ʹͳͬͯ͠·͏ϦεΫͷ͜ͱΛݴ͍ͬͯΔ
22. ͪͳΈʹ
    1ZUIPO
    Ͱ͸ʁ case Python: 2025.5.31 5 8FC
    αʔόͷΞʔΩςΫνϟ 22 GIL(Global Interpreter Lock) ෳ਺ͷεϨου͕ಉ࣌ʹϝϞϦʹΞΫηε͢Δ͜ͱ͕ͳ͍Α͏ʹɺෳ਺ͷεϨουͰ 1ZUIPO
    ΠϯλʔϓϦλʔΛಉ࣌ʹ࣮ߦ͢Δ͜ͱΛ๷͙ͨΊͷ΋ͷ
    1ZUIPO
    ϓϩάϥϜ͸ෳ਺ͷεϨουΛ࡞੒Ͱ͖Δ΋ͷͷɺҰ౓ʹ࣮ࡍͷ
    1ZUIPO
    ίʔυΛ࣮ߦͰ͖Δͷ͸ͭͷεϨου͚ͩ
    ͨͩɺྲྀੴʹϚϧνίΞ
    $16
    Λ׆༻Ͱ͖ͳ͍ͷ͸·͍ͣͷͰ
    ࠷৽ͷ
    1ZUIPO
    Ͱ͸
    GSFF
    UISFBEJOH
    ͱ͍͏ػೳʹΑͬͯ
    (*-
    Λ
    ΦϓγϣϯͰແޮԽͰ͖ΔΑ͏ʹͳ͍ͬͯΔʢ·ͩ৮Ε͍ͯͳ͍ʣ
23. ༨ஊ Digression 2025.5.31 5 8FC
    αʔόͷΞʔΩςΫνϟ 23 ೉ಡ
    *5
    ༻ޠ࢛ఱԦɺ͋ͱҰਓ͸ʁ ɾnginx ɾJWT ɾWSGI
24. 1ZUIPO
    Ͱ
    8FC
    ΞϓϦέʔγϣϯΛ
    ࡞ͬͯΈΔͧʂ Python Web Application 2025.5.31 24 1ZUIPO
    Ͱ
    8FC
    ΞϓϦΛ࡞Δ
25. 1ZUIPO
    ੡
    8FC
    ϑϨʔϜϫʔΫҰཡ Web Application Framework ೝূػߏɺ03.ɺ944ɺ42-J
    ͷରࡦػߏͳͲΛඪ४Ͱ౥ࡌ͍ͯ͠ΔॾʑίϛίϛศརϑϨʔϜϫʔΫ
    *OTUBHSBN
    1JOUFSFTU
    'JSFGPY
    ͷ։ൃʹ༻͍ΒΕ͍ͯΔ 2025.5.31 Django 5 1ZUIPO
    Ͱ
    8FC
    ΞϓϦΛ࡞Δ 25 ඞཁ࠷খݶͷػೳͷΈΛඋ͑ͨίϯύΫτͳϑϨʔϜϫʔΫ
    ֶशίετ͕௿͍ Flask ͱΓ͋͑ͣ଎͘ɺόοΫΤϯυ։ൃʹ͓͍ͯ͸σϑΝΫτελϯμʔυײ͕͋Δ
    σϑΥϧτͰ
    "1*
    υΩϡϝϯτΛੜ੒ͯ͘͠ΕΔ FastAPI
26. ྫ͑͹ʜ For example 2025.5.31 FastAPI 5 1ZUIPO
    Ͱ
    8FC
    ΞϓϦΛ࡞Δ 26 GPSFDBTUBUUFOEBODF
    ͱ͍͏
    "1*
    ͷఆٛ
27. ͜Ε͸
    8FC
    ͷߏ੒ͷ಺Ͳ͜ʹ͋ͨΔʁ Kore ha Web no kousei no uchi doko ni ataru? 2025.5.31 5 1ZUIPO
    Ͱ
    8FC
    ΞϓϦΛ࡞Δ 27 Web Server Browser HTTP HTML ಈతίϯςϯπΛ഑৴͢Δ৔߹ Application Server HTTP HTML DB WebSocket Frame WebSocket Frame
28. ͜Ε͸
    8FC
    ͷߏ੒ͷ಺Ͳ͜ʹ͋ͨΔʁ Kore ha Web no kousei no uchi doko ni ataru? 2025.5.31 5 1ZUIPO
    Ͱ
    8FC
    ΞϓϦΛ࡞Δ 28 Web Server Browser HTTP HTML ಈతίϯςϯπΛ഑৴͢Δ৔߹ Application Server HTTP HTML DB WebSocket Frame WebSocket Frame
29. 'BTU"1*
    ͚ͩͰ͸
    )551
    Λѻ͑ͳ͍ FastAPI cannot handle HTTP 2025.5.31 5 1ZUIPO
    Ͱ
    8FC
    ΞϓϦΛ࡞Δ 29 6WJDPSO
    ͱ͍͏ϥΠϒϥϦΛ࢖ͬͯݺͿඞཁ͕͋Δ
30. 6WJDPSO
    ͱ͸ʁ What is Uvicorn? 2025.5.31 5 1ZUIPO
    Ͱ
    8FC
    ΞϓϦΛ࡞Δ 30 "4(*
    ͱ͍͏
    8FC
    ඪ४ʹ४ڌͨ͠
    8FC
    αʔόͷ࣮૷ ɾ"4(*
    ඇಉظରԠͷ
    1ZUIPO
    ੡
    8FC
    αʔόͱ
    8FC
    ΞϓϦέʔγϣϯؒͷ
    ൚༻తͳΠϯλʔϑΣʔε
    84(*
    ͷޙܧͱͯ͠࡞ΒΕͨ
    ୅දతͳ࣮૷ͱͯ͠
    Uvicorn, NGINX Unit, Hypercorn
    ͳͲ͕͋Δ ɾ84(*
    1ZUIPO
    ੡
    8FC
    αʔόͱ
    8FC
    ΞϓϦέʔγϣϯؒͷ
    ൚༻తͳΠϯλʔϑΣʔε
    ୅දతͳ࣮૷ͱͯ͠
    Gunicorn, uWSGI
    ͳͲ͕͋Δ
31. 1ZUIPO
    ੡
    8FC
    ϑϨʔϜϫʔΫͷରԠඪ४ Web Application Framework and Interface mapping 84(*
    "4(*ʢ࠷ۙରԠͨ͠ʣ 2025.5.31 Django 5 1ZUIPO
    Ͱ
    8FC
    ΞϓϦΛ࡞Δ 31 84(* Flask "4(* FastAPI
32. 6WJDPSO
    ͷཪଆ Uvicorn backyard 2025.5.31 5 1ZUIPO
    Ͱ
    8FC
    ΞϓϦΛ࡞Δ 32 ࣮͸
    6WJDPSO
    ͸γϯάϧϓϩηεͰ͔͠ಈ͔ͳ͍ ͦͷͨΊɺૉ๿ʹσϓϩΠ͢ΔͱϚϧνίΞͷϚγϯϦιʔεΛेશʹ׆͔͖͠Εͳ͍
33. ϚϧνίΞΛ׆͔͢ߏ੒ Make use of Multiple CPU core 2025.5.31 5 1ZUIPO
    Ͱ
    8FC
    ΞϓϦΛ࡞Δ 33 ϚϧνίΞΛ׆͔ͯ͠ฒྻॲཧΛ༻͍ͯϦΫΤετΛࡹ͖͍ͨ৔߹͸ʁ (VOJDPSO
    ͸ϚϧνϓϩηεͰ΋͍͚ΔͷͰɺ(VOJDPSO
    ͷϫʔΧʔϓϩηεͱͯ͠
    6WJDPSO
    Λ༻͍Δߏ੒͕Αͦ͞͏ʢ'BTU"1*
    ͕ਪ঑͍ͯ͠Δʣ
    ͪͳΈʹ
    (VOJDPSO
    ͸
    /HJOY
    ͳͲͷ
    QSPYZ
    TFSWFS
    ͷཪͰಈ͔͢͜ͱΛਪ঑͍ͯ͠Δ ͷͰɺ/HJOY
    
    (VOJDPSO
    
    6WJDPSO
    ͱ͍͏ߏ੒͕ຊ൪؀ڥͱͯ͠͸Αͦ͞͏
34. ͻΉΒ ͝ਗ਼ௌ͋Γ͕ͱ͏͍͟͝·ͨ͠ Α͖
    1ZUIPO
    ϥΠϑΛʂ 2025.5.31 34