デプロイ今昔物語 〜CGIからサーバーレスまで〜 / The deployment technics

YAPC::Kyoto 2023

Transcript

1. σϓϩΠࠓੲ෺ޠ ʙCGI͔ΒαʔόʔϨε·Ͱʙ @mackee_w a.k.a macopy
2. ࿩͢಺༰
3. σϓϩΠ
4. @macopy • ໘ന๏ਓΧϠοΫ eεϙʔπࣄۀ෦ TonamelαʔόαΠυςοΫϦʔυ • Perlେ޷͖ Go΋޷͖ • GGST࢖༻Ωϟϥ: ϥϜϨβϧ • ISUCON11 ༏উ / ISUCON12 ग़୊
5. [AD] Tonamel
6. [AD] Tonamel ࠓճͷτʔΫͰ঺հ͢Δ ʮσϓϩΠʯͰ͍͏ͱ Tonamel͸ ʮPullܕσϓϩΠʯ͔ͭ ʮDockerʯͰ͢
7. ͜ͷτʔΫʹ͓͚ΔʮσϓϩΠʯͷൣғ • WebΞϓϦέʔγϣϯΛ։ൃͨ͠ޙ͔ΒɺϢʔβʔ͕ϒϥ΢βͰݟΔ ·Ͱʹඞཁͳٕज़܈ • ʮσϦόϦʔʯͱ΋ݴ͏ • ྫ: • αʔόʔ΁ͷϓϩάϥϜͷ൓өํ๏ • αʔόʔϓϩάϥϜͷϗεςΟϯάํ๏
8. !DISCLAIMER! ͜ͷτʔΫͰ͸ҟͳΔϨΠϠʔͷ֓೦͕ަޓ ʹग़͖ͯͨΓࠞͬͨ͟Γͯ͠࿩͞Ε·͢ ॱ൪͸֓Ͷ࣌ܥྻͰͷొ৔ॱͰ͕͢ɺ঺հ͢ ΔτϐοΫ͸ొஃऀͷڵຯͰܾΊ͍ͯ·͢
9. ͜ͷτʔΫͷਐΊํ • ҎԼͷΛҰͭͷσϓϩΠٕज़ʹରͯ͠࿩͍͖ͯ͠·͢ •ख๏ͷղઆ •࣌୅എܠ •࣮ફ
10. ͜ͷτʔΫͷਐΊํ • ҎԼͷΛҰͭͷσϓϩΠٕज़ʹରͯ͠࿩͍͖ͯ͠·͢ •ख๏ͷղઆ => Ͳ͏͍͏࢓૊Έͳͷ͔ •ొ৔എܠ => ੜ·ΕͨܦҢ •࣮ફ => ΍ͬͯΈΑ͏ɺମݧͯ͠ΈΑ͏
11. !DISCLAIMER! ͦͷ2 σϞʹ͸౰࣌࢖ΘΕ͍ͯͨιϑτ΢ΣΞ (όʔδϣϯ)͸࢖͍ͬͯ·ͤΜʂʂʂ ࠓݱࡏೖखͰ͖Δ΋ͷΛ࢖͍ͬͯ·͢
12. ొ৔͢Διϑτ΢ΣΞ΍؀ڥ • Perl 5.32.1(system perl), Perl 5.36.0 • Apache 2.4.54 • mod_perl 2.0.11 • Debian 11 bullseye • ݕূ؀ڥͱ͜ͷϚγϯؒ͸tailscaleͰVPNΛு͍ͬͯ·͢
13. Are you ready?
14. CGI
15. CGIͷख๏
16. CGIͷొ৔എܠ • 1993೥ʹఏҊ͞Εͨ࢓༷ ͜ͷ࣌ͷόʔδϣϯ͸1.0 • NCSA httpdʹhtbinͱ͍͏ػೳ͕͕͋ͬͨɺଞͷαʔόʔͰ΋࢖͑ ΔΑ͏ʹ”Common”ͳ࢓༷͕ߟ͑ΒΕͨ • ౰࣌͸HTML΋ࡦఆ్্ͰɺWebΛऔΓר͘πʔϧνΣΠϯ͕ੜ·Ε Δᴈ໌ظͱ͍ͬͨײ͡
17. ʮϨϯλϧαʔόʔʯ ※ҰྫͰ͢
18. ࣮ફ: PerlͷCGIϓϩάϥϜΛσϓϩΠ
19. ඪ४ετϦʔϜͱ؀ڥม਺͕͋Ε͹ͳΜͰ΋͓k • ϓϩάϥϛϯάݴޠඇґଘͰ͋Δ • PerlͰCGI͸͋·Γʹ΋͋Γ͖ͨΓͰ͸ • ͔ͤͬ͘ݴޠඇґଘͳͷʹ͜ͷσϞͰ͸ͭ·Μͳ͍Ͱ͢ΑͶʁ
20. ࣮ફ: jqͰCGIϓϩάϥϜΛ ॻ͍ͯσϓϩΠ
21. CGIͷσϝϦοτ • ϓϩηεىಈͷίετ͕ॏ͍ • ϦΫΤετͷͨͼʹϓϩηεΛىಈ͠ऴྃ͢Δ͜ͱʹͳΔ • PerlͷΑ͏ͳLLͰ͸ϞδϡʔϧͷಡΈࠐΈ͕౎౓ൃੜ͢Δ͜ͱʹ • ੲ͸`use`Ͱ͸ͳ͘`require`Λ࢖ͬͨDynamic Loading͕ଟ༻͞Ε ͍ͯͨͷ΋ͦͷ͍ͤͩͱฉ͍͍ͯ·͢
22. ੩తΤϯυϙΠϯτͷϕϯνϚʔΫ
23. CGIͷϕϯνϚʔΫ
24. mod_perl
25. mod_perlͷख๏
26. mod_perlͷొ৔എܠ • 1996೥ʹmod_perl, 2002೥ʹmod_perl2͕ϦϦʔε • Apacheͷػೳ֦ுΛPerlͰߦ͏Ϟδϡʔϧ • Ͱ͸͋Δ͕CGIϓϩάϥϜΛͦͷ··ޮ཰Α͘ಈ͔ͨ͢Ίʹ࢖ΘΕͨ • `ModPerl::Registry`౳ͷHandlerΛ࢖͑͹CGIͱͷޓ׵ੑΛอͬͨ··࢖͑Δ • άϩʔόϧม਺ͷण໋͕ϦΫΤετ୯ҐͰͳ͘ͳͬͨ • ཪΛฦͤ͹ϦΫΤετ୯ҐͰ͋ΔલఏͷCGIϓϩάϥϜ͸ͦͷ··Ͱ͸ಈ͔ͳ͍
27. ࣮ફ: PerͷCGIϓϩάϥϜΛ mod_perlͰಈ͔͢
28. ྨࣅ඼ • mod_mruby, mod_lua etc… • Perlͷ෦෼Λผͷݴޠʹஔ͖׵͑ͨApacheͷϞδϡʔϧ • ngx_http_perl_module • nginxʹPerlΛ૊ΈࠐΜͰϦΫΤετॲཧͤ͞ΔϞδϡʔϧ
29. FastCGI
30. FastCGIͷख๏
31. FastCGIͷొ৔എܠ • 1996೥ʹఏএ͞Εͨ • mod_perlͷ༻్ͱಉ͘͡ʮCGIϓϩάϥϜͷߴ଎Խʯ • ҰํͰɺmod_perlͱ͸ҧ͍ݴޠඇґଘΛ໨ࢦͨ͠ • ׬શͳdrop-in replacement͸Ͱ͖ͳ͍͕ɺηϚϯςΟΫε͸CGI͔Β Ҿ͖ܧ͍Ͱ͍Δ • 1ͭͷίωΫγϣϯͰϦΫΤετͷଟॏԽ΋͞Ε͍ͯΔ
32. ࣮ફ: PerlͷFastCGI޲͚ϓϩάϥϜΛ ಈ͔͢
33. FastCGIͷྨࣅ඼ • SpeedyCGI/PersistentPerl • CGIϓϩηεΛӬଓԽͯ͠ར༻͢Δվ଄͞ΕͨperlΠϯλϓϦλΛ ༻͍Δ • #!/usr/bin/speedy ʹshebangΛஔ͖׵͑Δͱར༻Ͱ͖Δ • ApacheͱSpeedyCGIؒ͸CGIͱಉ༷ඪ४ετϦʔϜ+؀ڥม਺
34. PSGI
35. PSGIͷొ৔എܠ • 2009೥ʹspec͕CPANʹshipit͞Εͨ • WebϑϨʔϜϫʔΫͷ࣌୅ʹͳ͍͕ͬͯͨɺWebϑϨʔϜϫʔΫ͕ͦΕ ͧΕɺCGI΍FastCGIɺmod_perl޲͚ͷରԠΛߦͳ͍ͬͯͨ… • ͦ͜ͰWebΞϓϦͷೖग़ྗΛந৅Խͨ͠ΠϯλʔϑΣΠεΛ༻ҙͯ͠ (=PSGI)ͦͷΠϯλʔϑΣΠεΛѻ͍΍ͨ͘͢͠ϥΠϒϥϦ(=Plack)Λ༻ ҙͯ͠ɺPlack::Handlerͱͯ͠CGI΍mod_perlͷϋϯυϥ͕࣮૷͞Εͨ
36. PSGIͷొ৔എܠ ͦͷ2 • ҰํͰϓϩάϥϛϯάݴޠϥϯλΠϜࣗମͰHTTPαʔόʔΛಈ͔͢Α ͏ʹͳͬͨ • ”ϦόʔεϓϩΩγ”ͱ͍͏֓೦͕ҰൠతʹͳΓ࢝Ίͨ • lighttpd, nginx etc… • Plack::Handlerͱͯ͠Starman΍Starletͱ͍ͬͨPreforkܕͷHTTPαʔ όʔ͕࣮૷͞Εͯ޿͘࢖ΘΕΔΑ͏ʹͳͬͨ
37. Plack/PSGIͷख๏
38. ࣮ફ: ੜPSGIΛॻ͍ͯΈͨ
39. PSGIͷྨࣅ඼ • Java Servelet API • WSGI (Python) • Rack (Ruby) • ͜ͷॱ൪Ͱspecʹݴٴ͕͋Δ • PSGIʹ͸WSGIͱRackͱ”JSGI”ʹݴٴ͕͋Δ
40. Plackͷྨࣅ඼(ΠϯλʔϑΣΠεࢹ఺) • ઌ૆ͨͪ • CGI.pm • CGI::Application • Apache::Request • HTTP::Engine • Catalyst::Engine
41. ͜Ε·Ͱ͸ΞʔΩςΫνϟ΍ ϓϩάϥϛϯάΠϯλʔϑΣΠεΛ த৺ʹ͝঺հ
42. ͔͜͜Β͸αʔόʔ΁ͷ ൓өํ๏ʹ͍ͭͯ͝঺հ
43. FTP
44. CGI/mode_perl/FastCGIͰ͸FTPΛ ࢖ͬͯσϓϩΠ͍ͯͨ͠ͷͰলུ ※2023೥࣌఺ͷҙݟͰ͢
45. Pushܕ σϓϩΠ
46. PushܕσϓϩΠͷख๏
47. ࣮ફ: PSGIΞϓϦΛ PushܕσϓϩΠ͢Δ
48. PushܕσϓϩΠͷ೉ ఺ • αʔόʔ୆਺͕େ͖͘ͳΓ࢝Ίͨ • Push͢ΔଆͷϦιʔεͷ཯଎ͯ͠ σϓϩΠ଎౓͕஗͘ͳΔ • ύϒϦοΫΫϥ΢υͷීٴͰΦʔ τεέʔϧ͢ΔΑ͏ʹͳ͕ͬͨɺ ͦͷ৔߹ͷ৯͍߹Θ͕ͤѱ͍
49. Pullܕ σϓϩΠ
50. PullܕσϓϩΠͷख๏
51. ࣮ફ: stretcherΛ༻͍ͨ PushܕσϓϩΠ
52. ΞʔΩςΫνϟͷ঺հʹ໭Δ
53. Docker
54. DockerΛ࢖ͬͨσϓϩΠͷख๏
55. ࣮ફ: Docker SwarmΛ༻͍ͨ DockerͷσϓϩΠ
56. Dockerͷొ৔എܠ • Dockerͷൃද͸2013೥ • PullܕσϓϩΠ • ʮίϯςφʯͱ͍͏ܗͰWebΞϓϦέʔγϣϯΛϥϯλΠϜ͝ͱ packͯ͠σϓϩΠ͢Δख๏ • ʮσϓϩΠʯͷର৅͕ΞϓϦέʔγϣϯϓϩάϥϜʹՃ͑ͯϥϯ λΠϜ·Ͱ޿͕ͬͨ
57. Serverless
58. LambdaΛ༻͍ͨαʔόʔϨεͷख๏
59. ࣮ફ: lambrollΛ༻͍ͨ Perl WebΞϓϦέʔγϣϯͷσϓϩΠ
60. Serverless/FaaSͷొ৔എܠ • ΞϓϦέʔγϣϯ੍࡞ऀ͕௚઀؅ཧ͢Δର৅͕࣌୅Λ௥͏͝ͱʹϨΠ Ϡʔ্͕΁ͱ্͕͍͍ͬͯͬͯͨ • ෺ཧαʔόʔ, Ծ૝αʔόʔ, IaaS, ίϯςφ • ϥϯλΠϜ΍ϓϩηεͷϥΠϑαΠΫϧ·ͰΫϥ΢υࣄۀऀʹ͓ئ͍ ͯ͠͠·͏ͷ͕Serverless • Ϩϯλϧαʔόʔ/CGI΁ͷճؼ, ΑΓޮ཰Խ͞Εͨ΋ͷ
61. Serverless/FaaSͷྨࣅ඼ • PaaS • Heroku, Elastic Beanstalk, AppEngine(Flexible Environment)… • ϥϯλΠϜͷ੹຿͸Ϋϥ΢υࣄۀऀ • ͨͩ͠αʔόʔతଘࡏ͸࣮֬ʹײ͡Δ, εέʔϦϯάઃఆͳͲ
62. ͍͔͕Ͱͨ͠Ͱ͠ΐ͏͔
63. ొஃऀͷײ૝ • σϓϩΠٕज़͸લʹ࢖ΘΕٕͨज़ͷ՝୊Λղফ͢ΔͨΊʹੜ·Ε͖ͯͨ • ࢼߦࡨޡͷ݁Ռࠓ͕͋Δɻͭ·Γ “try/catch” Ͱ͢Ͷ • ͦΕ͸ͦΕͱͯ͠ɺੲͷٕज़Ͱ΋ݟͲ͜Ζ͸͋Δ • CGI͕ಈ͘Ϩϯλϧαʔόʔ͸FaaSͱݴ͑Δ • ੲΑΓ΋WebΞϓϦέʔγϣϯ͕ղ͜͏ͱ͢Δ՝୊͕ෳࡶʹͳ͍ͬͯΔ ͷͰɺ؅ཧํ๏ͷҰͭͰ͋ΔʮσϓϩΠʯ΋ෳࡶʹͳΔ܏޲
64. ͋ͳͨͷ޷͖ͳ ʮσϓϩΠʯ͸ ͋Γ·͔ͨ͠ʁ
65. ࠙਌ձͱ͔࿓ԼͰ࿩ͯ͠ཉ͍͠࿩୊ • 2000೥ΑΓલͷJavaͱ͔͸Ͳ͏΍ͬͯσϓϩΠ͍ͯͨ͠ͷ͔ʁ • warͰݻΊͯΛFTPͰυʔϯ͍ͯͨ͠, TomcatͰͱ͍͏࿩୊͕͋Γ·͢ɻ༗ࣝऀ ͷํʑͲ͏ͧ • ASPͱ͔IISͱ͔Windows Server • mod_perl͔FastCGIͲͪΒΛ࢖͍͔ͬͯͨ • ͓͢͢ΊͷϨϯλϧαʔόʔ • ొஃऀ͸XREAΛ࢖͍ͬͯ·ͨ͠
66. ࠙਌ձͱ͔࿓ԼͰ࿩ͯ͠ཉ͍͠࿩୊ ͦͷ2 • ϩʔϦϯάϦελʔτ, ϒϧʔάϦʔϯσϓϩΠ • graceful restart • PullܕσϓϩΠ+graceful restart͸σϓϩΠ͕ΊͪΌΊͪΌ଎͔ͬͨ • ΠϯϑϥͷઃఆσϓϩΠͱΞϓϦέʔγϣϯͷσϓϩΠͷڥ໨