マネーフォワードを支えるメール配信基盤

Encraft#16 での登壇資料です。
Encraft#16: https://knowledgework.connpass.com/event/324204/
動画のアーカイブ: https://www.youtube.com/watch?v=nCGIKxyM44E

Transcript

1. ϚωʔϑΥϫʔυΛࢧ͑Δ ϝʔϧ഑৴ج൫ 2024/07/29 ੪౻ ༏ً (x-color)
2. Money Forward Platform Application Division ςοΫϦʔυ ϚΠΫϩαʔϏε܈ͷ։ൃӡ༻ɺ෦ͷK8sج ൫؅ཧ ੪౻ ༏ً (x-color) GitHub: @x-color X: @xcolor12
3. • ϚωʔϑΥϫʔυͷϝʔϧ഑৴ج൫ʹ͍ͭͯ • چΞʔΩςΫνϟͷ՝୊ͱ৽ΞʔΩςΫνϟʹ͍ͭͯ • ৽ΞʔΩςΫνϟ΁ߏ੒มߋ࣌ͷ՝୊఺ΛͲ͏ղܾ͔ͨ͠ • ࠓޙͷల๬ ຊ೔͓࿩͢͠Δ͜ͱ
4. 1ϲ݄Ͱ2.5ԯ௨Ҏ্ ͲΜͲΜ૿ՃதͰڈ೥ͱൺֱͯ͠25%ఔ౓૿͍͑ͯΔ ϚωʔϑΥϫʔυ͕ૹΔϝʔϧ਺
5. ϚωʔϑΥϫʔυͷ ϝʔϧ഑৴ج൫
6. چΞʔΩςΫνϟ
7. چΞʔΩςΫνϟͷ໰୊ ϝʔϧ഑৴αʔϏε܈͕ผʑͷνʔϜͰผʑʹ։ൃӡ༻͞Ε͍ͯͨ • ഑৴࣌ͷࡉ͔ͳڍಈ͕όϥόϥ ◦ ό΢ϯε৘ใ͸Ͳ͏ѻ͏ͷ͔ʁ ◦ RFCҧ൓ͷϝʔϧΞυϨεΛͲ͏ѻ͏ͷ͔ʁ • ϝʔϧ഑৴ͷ࢓༷มߋ࣌ʹෳ਺νʔϜΛލ͍Ͱมߋ͢Δඞཁ͕͋Δ • جຊతʹಉ͡ػೳΛෳ਺νʔϜ͕։ൃ͍ͯ͠ΔͷͰίετ͕ແବʹ͔͔Δ • ϝʔϧΞυϨεͱ͍ͬͨݸਓ৘ใΛͦΕͧΕͰѻ͏ඞཁ͕͋Δ
8. ϝʔϧ഑৴αʔϏεΛ ౷Ұ͠Α͏
9. ϝʔϧ഑৴αʔϏε౷Ұͷར఺ ϝʔϧ഑৴αʔϏεΛ౷Ұ͢Δͱ... • ഑৴࣌ͷࡉ͔ͳڍಈ͕όϥόϥ ◦ ഑৴ॲཧ͕ҰՕॴͰߦΘΕΔͷͰɺॲཧํ਑͕౷Ұ͞ΕΔ • جຊతʹಉ͡ػೳΛෳ਺νʔϜ͕։ൃ͍ͯ͠ΔͷͰίετ͕ແବʹ͔͔Δ ◦ શͯಉ͡νʔϜͰ։ൃӡ༻͍ͯ͠ΔͷͰ༷ʑͳίετ͕ݮগ • ϝʔϧ഑৴ͷ࢓༷มߋ࣌ʹෳ਺νʔϜΛލ͍Ͱมߋ͢Δඞཁ͕͋Δ ◦ ओʹ഑৴ॲཧ෦Λมߋ͢Δ͚ͩͰOK • ϝʔϧΞυϨεͱ͍ͬͨݸਓ৘ใΛͦΕͧΕͰѻ͏ඞཁ͕͋Δ ◦ ݸਓ৘ใ΁ͷΞΫηεܦ࿏Λ୯ҰͷαʔϏεʹߜΕΔ
10. چΞʔΩςΫνϟʢ࠶ܝʣ
11. ݱࡏͷϝʔϧ഑৴ج൫ʢ৽ΞʔΩςΫνϟʣ
12. ݱࡏͷϝʔϧ഑৴ج൫ʢ৽ΞʔΩςΫνϟʣ ຊ೔࿩͢ͱ͜Ζ
13. ৽ΞʔΩςΫνϟʹࢸΔ·Ͱʹ ͲΜͳ՝୊͕͋ͬͨͷ͔ʁ
14. ෼ࢄ͍ͯͨ͠഑৴ॲཧΛҰͭʹू໿͢Δ • ϝʔϧྔ͕ෆۉҰͳେྔͷϝʔϧΛࡹ͘ඞཁ͕͋Δ ◦ ຖ೔େྔͷϝʔϧΛ഑৴ͭͭ͠ɺಛఆͷ༵೔ɺ೔෇ʹ͸௥ՃͰେྔʹཁٻ͞ΕΔ • ૹ৴଎౓ΛҰఆԽ͢Δඞཁ͕͋Δ ◦ υϝΠϯϨϐϡςʔγϣϯʢϝʔϧ഑৴ऀͷධՁʣͷҡ࣋ͷͨΊ • ϝʔϧछผʹΑΔ഑৴ظݶͷҧ͍Λѻ͏ඞཁ͕͋Δ ◦ ଈ࣌Ͱ഑৴͢Δඞཁ͕͋Δ ◦ ࢦఆ೔தʹૹΓ͖Δඞཁ͕͋Δ • ͳΔ΂҆͘Ձʹ࣮ݱ͍ͨ͠ ◦ ·ͩ·ͩϝʔϧ͸૿͑ΔͷͰɺίετͷ্͕Γํ͕؇΍͔Ͱ͋Δඞཁ͋Γ ৽ΞʔΩςΫνϟ΁ͷ՝୊఺
15. ʢࢀߟʣݱࡏͷϝʔϧ഑৴ྔ ຖ೔Ұఆ਺Ҏ্ͷϝʔϧΛ഑৴ͭͭ͠ɺಛఆͷ༵೔ʹ͸͞Βʹ૿͑Δɻ
 ಛఆͷ೔෇ʢڅྉ೔ͳͲʣʹ΋௥ՃͰ૿͑Δɻ 1࣌ؒ͋ͨΓ 300ສ௨ఔ౓
16. ՝୊΁ͷΞϓϩʔν
17. ServerͱSenderͰ෼͔Ε͓ͯΓɺ
 ඇಉظͰϝʔϧ഑৴Λߦ͍ͬͯΔɻ
 RDBΛར༻ͯ͠શͯͷ৘ใΛ؅ཧɻ ͜ͷ··৽ΞʔΩςΫνϟʹ͢Δͱɺɺ • Write͕ଟ͍ͷͰDB͕ϘτϧωοΫʹͳΔ • DB͕༰қʹεέʔϧΠϯ/Ξ΢τͰ͖ͳ͍ • େྔͷϝʔϧΛࡹ͘ʹ͸ߴεϖοΫͳDB͕ඞཁͰ ίετ͕ߴ͍ • શͯͷϝʔϧ͕Ұॹͨ͘ʹѻΘΕΔ ϝʔϧ഑৴ϚΠΫϩαʔϏεͷچΞʔΩςΫνϟ
18. طଘͷϝʔϧαʔϏεͷར༻ঢ়گͷ෼ੳ͔Β࢝Ίͨ • ϝʔϧͷ഑৴ྔ ◦ ཁٻ͞ΕΔ࠷େεϧʔϓοτ͸ʁ ▪ ਺ඦRPS͸ඞਢɻকདྷతʹ͸1000RPSҎ্ ◦ ഑৴ྔͷมԽ͸Ͳͷ͙Β͍ʁ ▪ ೥୯ҐͰ25%Ҏ্૿͍͑ͯΔ • ϝʔϧͷαΠζ ◦ খ͍͞ϝʔϧ͕ଟ͍ͷ͔ɺେ͖ͳϝʔϧ͕ଟ͍ͷ͔ʁ ▪ ΄΅શ͕ͯখ͍͞ϝʔϧʢ256KBҎԼʣ ࣮ࡍͷϝʔϧͷར༻ঢ়گͷ෼ੳ
19. ϝʔϧ഑৴ϚΠΫϩαʔϏεͷߏ੒
20. ϝʔϧ഑৴͸ϝοηʔδΩϡʔΛར༻ͨ͠ ඇಉظॲཧͱͳ͍ͬͯΔɻ ΄ͱΜͲͷϝʔϧ͕খ͍͞ͷͰϝʔϧ৘ใ Λ·ͱΊͯϝοηʔδʹ֨ೲ͍ͯ͠Δɻ ͜Ε͸ओʹԼه໨తͷͨΊʹಋೖ • ෆۉҰͳϝʔϧྔΛ҆ఆͯ͠ѻ͏ • ഑৴଎౓ͷҰఆԽ • ϓϩμΫτ΁ͷߴ଎ͳϨεϙϯε • ૹ৴ॲཧͷ༰қͳϦτϥΠ ϝοηʔδΩϡʔͷར༻
21. SNS΍SQS͸ϝοηʔδαΠζ্ݶ͕ খ͍͞ʢ256KB)ɻ େ͖ͳϝʔϧΛૹ৴͢Δ৔߹͸S3ʹ ϝʔϧ৘ใΛஔ͍͓͖ͯɺͦ͜΁ͷΞΫ ηεύε͚ͩϝοηʔδʹೖΕͯྲྀ͠ ͍ͯΔɻ ※શϝʔϧΛS3΁ྲྀ͢ͷ͸ίετ͕ߴ͍ ϝοηʔδΩϡʔͷར༻
22. SNS͸ෳ਺ͷSQSͱ઀ଓ͠ɺϝʔϧछผ σʔλΛར༻ͯ͠഑৴ઌͷSenderΛܾఆɻ ϝʔϧछผ͝ͱʹεέʔϧΞ΢τՄೳͰ͋ Γɺ഑৴଎౓Λ੍ޚɻ͜ΕʹΑΓ഑৴ظݶ ͷҧ͍Λѻ͏͜ͱ͕Ͱ͖Δɻ Sender͕෼͔Ε͍ͯΔͷͰɺछผ͝ͱʹॲ ཧΛ෼͚ΒΕΔʢ஗ԆDBͷࢀরͳͲʣ ϝʔϧछผ͝ͱʹεέʔϥϒϧͳߏ੒
23. DynamoDBΛར༻ͯ͠ɺϝʔϧͷૹ৴ঢ়ଶ৘ใ Λѻ͍ͬͯΔɻ αʔϏεಛੑ্Write͕ଟ͘ɺ࣌ؒଳ΍೔෇ʹ ΑΓར༻཰͕େ͖͘ҟͳΔɻ →RDBͰ͸
 ɹߴίετ & εέϥʔϏϦςΟෆ଍ ͳ͓ɺଟॏ഑৴Λආ͚ΔͨΊʹCondition expressionsΛར༻ͯ͠ഉଞ੍ޚΛߦ͍ͬͯ Δɻ Key-ValueετΞͷར༻
24. ϢʔβʔͷΈͳ͞Μ΁ਖ਼ৗʹϝʔϧΛ഑৴͠ଓ͚͍ͯ·͢ • 1ϲ݄ʹ2.5ԯ௨ఔ౓ ◦ ൒೔Ͱ࠷େͰ1500ສ௨ఔ౓ • ࠷େεϧʔϓοτ 1200RPS+ ◦ ͜͜·Ͱཁٻ͞ΕΔ͜ͱ͸ݱঢ়ͳ͍ • ίετ 80%Χοτ ◦ ϝʔϧ഑৴ϚΠΫϩαʔϏεͷվमલ/ޙͰࢉग़ Քಇঢ়گ
25. ࠓޙͷల๬
26. • ֤छϝʔϧ෼ੳͷαϙʔτ ◦ ϝʔϧ͸ಧ͍ͨ/ό΢ϯε͔ͨ͠ ▪ σʔλ͸͋Δ͕ɺϓϩμΫτଆ͕֬ೝͮ͠Β͍ঢ়گ ◦ ։෧཰΍ϦϯΫͷΫϦοΫ཰ͳͲͷ֤छϝτϦΫεͷ௥੻ ▪ Ұ෦ͷϝʔϧ͸Ͱ͖͍ͯΔ͕ɺશͯͷϝʔϧͰαϙʔτͰ͖ΔΑ͏ʹ͍ͨ͠ • ಺෦αʔϏεؒͷ࿈ܞͷڧԽ ◦ ݩʑผαʔϏεͩͬͨͷͰɺ·ͩඇޮ཰ͳ౷߹͕࢒͍ͬͯΔ ·ͩ·ͩղܾ͍ͨ͠՝୊͸ͨ͘͞Μ
27. ·ͱΊ
28. • ϚωʔϑΥϫʔυͷϝʔϧ഑৴ج൫ͷ঺հ ◦ ػೳ୯ҐͰͷαʔϏεू໿͸ϝϦοτ͕ଟ͍ • େྔͷϝʔϧΛࡹͨ͘Ίʹ ◦ ࣮ࡍͷར༻ঢ়گʹԠͨ͡ΞʔΩςΫνϟ࠷దԽ ◦ ϝοηʔδϯάαʔϏεͷ༗ޮ׆༻ ◦ Key-ValueετΞͷ׆༻ ·ͱΊ
29. Thank you!!
30. όοΫΤϯυΤϯδχΞ ੵۃ࠾༻த https://hrmos.co/pages/ moneyforward/jobs/ 1960606981176266893