Share
Embed
200万ドメインのHTTPS化を見据えた大規模証明書管理アーキテクチャ / CKP-QGPOP-2milions-tls
研究開発によってサーバ台数を100分の1にする技術を生み出す
ペパボ研究所 主席研究員 兼 シニアプリンシパルエンジニア 松本 亮介 / Pepabo R&D Institute, GMO Pepabo, Inc.
2017.12.07 CKP-QGPOP研究会
MATSUMOTO Ryosuke PRO
December 07, 2017
Transcript
58 slides
-
ݚڀ։ൃʹΑͬͯαʔόΛ100ͷ1ʹ͢Δٕज़ΛੜΈग़͢ ϖύϘݚڀॴ ओ੮ݚڀһ ݉ γχΞϓϦϯγύϧΤϯδχΞ দຊ ྄հ / Pepabo R&D
Institute, GMO Pepabo, Inc. 2017.12.07 CKP-QGPOPݚڀձ 200ສυϝΠϯͷHTTPSԽΛݟਾ͑ͨ େنূ໌ॻཧΞʔΩςΫνϟ -
• ژେֶത࢜ʢใֶʣ • ϖύϘݚڀॴ ओ੮ݚڀһ • GMOϖύϘ γχΞɾϓϦϯγύϧΤϯδχΞ • ݩΠϯϑϥΤϯδχΞ
• ຊOSSྭɾใॲཧֶձ ࢁԼه೦ݚڀͳͲଟ 2 দຊ྄հ / ·ͭͱΓʔ / @matsumotory -
• ݸਓ͚ͷՁ֨ϗεςΟϯάͰ࠾༻͞ΕΔ͜ͱͷଟ͍ํࣜ※1 • ୯ҰͷWebαʔόʹߴूੵ(ສυϝΠϯ)ʹϗετΛऩ༰ • ԾϗετํࣜʹΑΓେྔͷϗετΛಉҰϓϩηεͰॲཧ • ϦόʔεϓϩΩγͷ߹ߋʹߴूੵ(ेɺඦສυϝΠϯ) • ߴूੵϚϧνςφϯτํࣜͷHTTPSରԠٸ
6 ߴूੵϚϧνςφϯτํࣜͷWebαʔό ˞দຊ྄հ തֶ࢜Ґจ8FCαʔόͷߴूੵϚϧνςφϯτΞʔΩςΫνϟʹؔ͢Δݚڀ IUUQTSFQPTJUPSZLVMJCLZPUPVBDKQETQBDFIBOEMF ژେֶ ݄ -
• ngx_mruby※1 ʹTLSϋϯυγΣΠΫͷRubyϑοΫઃఆΛ࣮ • TLSϋϯυγΣΠΫ࣌ʹϑοΫ͞ΕͨRubyͷίʔυΛ࣮ߦ • RubyϝιουͰOpenSSLͱσʔλͷड͚͠Λ࣮ߦ • KVS/File͔Βূ໌ॻൿີ伴ΛRubyܦ༝ͰಡΈࠐΈՄ 19
ngx_mruby v1.16.0ʢ20162݄ʣͰՃ࣮ ˞দຊ྄հ Ԭ෦णஉ NPE@NSVCZεΫϦϓτݴޠͰߴ͔ͭলϝϞϦʹ֦ுՄೳͳ8FCαʔόͷ ػೳ֦ுࢧԉػߏ ใॲཧֶձจࢽɼ7PM /P QQ /PW -
ngx_mrubyͷূ໌ॻಈతಡΈࠐΈ࣮ϑϩʔ 20 44-@$59@TFU@DFSU@DC ʹ3VCZͷόΠ τίʔυΛ࣮ߦ͢ΔIBOEMFSͷؔϙΠϯ λͱίϯςΩετߏମϙΠϯλΛηοτ OHJOYDPOGͷઃఆ͔ΒಡΈࠐΜͩ3VCZε ΫϦϓτΛόΠτίʔυԽͯ͠ ίϯςΩετߏମʹอଘ 5-4ϋϯυγΣΠΫ࣌ʹIBOEMFS͕ίʔϧ
όοΫ͞ΕόΠτίʔυΛ࣮ߦ όΠτίʔυͰ࣮ߦ͞ΕΔ3VCZͷϝιο υܦ༝Ͱূ໌ॻൿີ伴σʔλ͕ ίϯςΩετߏମʹηοτ͢Δ ূ໌ॻͱൿີ伴σʔλʹج͍ͯ#*0ܦ༝Ͱ σʔλΛಡΈࠐΜͰϋϯυγΣΠΫΛଓߦ OHJOYىಈ࣌ͷॲཧ OHJOY͕ϦΫΤετड৴ͨ࣌͠ͷॲཧ NSVCZͷ5-4ϋϯυγΣΠΫϑοΫσΟ ϨΫςΟϒ͕ଘࡏͨ͠Β 44-@$59@TFU@DFSU@DC Λݺͼग़͢ -
• ϦΫΤετͷ͋ͬͨOpenSSLͷservernameͰఆ • ඥͮ͘ূ໌ॻͱϓϩΩγઌΛRubyͷίʔυͰܾఆ • RubyͰಈతʹઃఆ(mruby_set $hostͱproxy_pass $host) • ୯ҰͷઃఆͰສͷΦʔμʔͷυϝΠϯΛಈతʹॲཧ
• ઃఆͱূ໌ॻʹؔ͢ΔϝϞϦ༻ྔΛઅ 21 ngx_mrubyͷಈతͳઃఆͱূ໌ॻಡΈࠐΈ -
࣮ݧڥ 28 ༷ $16 *OUFM9FPO&W()[DPSF .FNPSZ (CZUFT 4FSWFS /&$&YQSFTT3G& 04
$FOU04-JOVY,FSOFM -
• 10ສϗετͷ4096bitsͷ伴ͷൿີ伴ͱαʔόূ໌ॻΛ nginxόʔδϣϯ1.11.13ͰಡΈࠐΈ • ैདྷख๏࠶ಡΈࠐΈॲཧͰαʔϏεఀࢭʹܨ͕Δ 29 ैདྷख๏ͱఏҊख๏ͷىಈ࣌ؒͷ࣮ݧ ߲ ैདྷख๏ ఏҊख๏
ϓϩηεىಈͷ࣮࣌ؒ ඵ ϓϩηεىಈͷϢʔβ$16༻࣌ؒ ඵ ϓϩηεىಈͷγεςϜ$16༻࣌ؒ ඵ -
ఏҊํࣜͱैདྷํࣜͷੑೳൺֱ 32 ಉ࣌ଓ ैདྷํࣜ QSFMPBE SFRTFD ఏҊํࣜ EZOBNJDMPBE SFRTFD
$(*ͷΑ͏ͳϓϩηεෳ͕ੜ͡ͳ͍ܰྔͳ੩తϑΝΠϧͷϦΫΤετͰɺ ূ໌ॻͷಈతಡΈࠐΈैདྷख๏ͷ੩తಡΈࠐΈͱൺֱͯ͠΄΅͕ࠩͳ͍ -
1ϲ݄ؒͷূ໌ॻͷભҠ 39 0 5000 10000 15000 20000 25000 1 6
11 16 21 26 31 The number of cer-ficates day The number of cer-ficate in a month dynamic load preload Θ͔Γʹ͍͕͘Ұϲ݄Ͱ͔Βͱ ূ໌ॻఔ૿͍͑ͯΔ ূ໌ॻϦϓϨʔεલͷഒ͔Βഒ -
1ϲ݄ؒͷ1αʔόͷඵؒHTTPϦΫΤετ 40 0 200 400 600 800 1000 1200 1400
1600 1 6 11 16 21 26 31 Requests/sec day Request/sec in a mouth dynamic load preload ϦϓϨʔεޙʹ-#ͷׂΓͯൺ͕มΘͬͨͨΊ )551ʴ)5514ϦΫΤετॲཧഒ͔Βഒ -
1ϲ݄ؒͷCPU༻ͷભҠ 41 0.00 1.00 2.00 3.00 4.00 5.00 6.00 7.00
8.00 9.00 1 6 11 16 21 26 31 CPU usage(%) day CPU usage in a mouth dynamic load preload ূ໌ॻ͕͔ΒഒʹؔΘΒͣ$16༻ඍ͕ࠩͩݮ ສূ໌ॻ૿ՃͰ$16ఔඍ૿ -
1ϲ݄ؒͷϝϞϦ༻ͷભҠ 42 0 1000 2000 3000 4000 5000 6000 7000
8000 1 6 11 16 21 26 31 Memory usage(MBytes) day Memory usage in a mouth dycamic load preload ূ໌ॻ͔ΒഒʹؔΘΒͣϝϞϦ༻ݮ ఏҊख๏ສҎ্૿Ճ͍ͯ͠Δূ໌ॻʹ΄΅ґଘ͍ͯ͠ͳ͍ ূ໌ॻ૿Ճʹ͍ϝϞϦ༻ྔαʔόશମͰ(#ZUFTఔ૿Ճ -
50 0 5000 10000 15000 20000 25000 30000 2017/07/02-09:00 2017/07/04-09:00
2017/07/06-09:00 2017/07/08-09:00 2017/07/10-09:00 2017/07/12-09:00 2017/07/14-09:00 2017/07/16-09:00 2017/07/18-09:00 2017/07/20-09:00 2017/07/22-09:00 2017/07/24-09:00 2017/07/26-09:00 2017/07/28-09:00 2017/07/30-09:00 2017/08/01-09:00 2017/08/03-09:00 2017/08/05-09:00 2017/08/07-09:00 2017/08/09-09:00 2017/08/11-09:00 2017/08/13-09:00 2017/08/15-09:00 2017/08/17-09:00 2017/08/19-09:00 2017/08/21-09:00 2017/08/23-09:00 2017/08/25-09:00 2017/08/27-09:00 2017/08/29-09:00 2017/08/31-09:00 2017/09/02-09:00 2017/09/04-09:00 2017/09/06-09:00 2017/09/08-09:00 2017/09/10-09:00 2017/09/12-09:00 2017/09/14-09:00 2017/09/16-09:00 2017/09/18-09:00 2017/09/20-09:00 2017/09/22-09:00 2017/09/24-09:00 2017/09/26-09:00 2017/09/28-09:00 2017/09/30-09:00 2017/10/02-09:00 2017/10/04-09:00 2017/10/06-09:00 2017/10/08-09:00 2017/10/10-09:00 2017/10/12-09:00 2017/10/14-09:00 2017/10/16-09:00 2017/10/18-09:00 2017/10/20-09:00 2017/10/22-09:00 2017/10/24-09:00 2017/10/26-09:00 2017/10/28-09:00 2017/10/30-09:00 2017/11/01-09:00 Memory Usage [MBytes] Day Memory Usage for Four Months Memory Usage ಈతॲཧ ຖSFMPBE SFMPBEఀࢭத SFMPBEఀࢭத ϦϑΝΫλϦϯά ສυϝΠϯ)5514Խ ສυϝΠϯ)5514Խ SFMPBEఀࢭ -
52 0 5000 10000 15000 20000 25000 30000 2017/07/02-09:00 2017/07/04-09:00
2017/07/06-09:00 2017/07/08-09:00 2017/07/10-09:00 2017/07/12-09:00 2017/07/14-09:00 2017/07/16-09:00 2017/07/18-09:00 2017/07/20-09:00 2017/07/22-09:00 2017/07/24-09:00 2017/07/26-09:00 2017/07/28-09:00 2017/07/30-09:00 2017/08/01-09:00 2017/08/03-09:00 2017/08/05-09:00 2017/08/07-09:00 2017/08/09-09:00 2017/08/11-09:00 2017/08/13-09:00 2017/08/15-09:00 2017/08/17-09:00 2017/08/19-09:00 2017/08/21-09:00 2017/08/23-09:00 2017/08/25-09:00 2017/08/27-09:00 2017/08/29-09:00 2017/08/31-09:00 2017/09/02-09:00 2017/09/04-09:00 2017/09/06-09:00 2017/09/08-09:00 2017/09/10-09:00 2017/09/12-09:00 2017/09/14-09:00 2017/09/16-09:00 2017/09/18-09:00 2017/09/20-09:00 2017/09/22-09:00 2017/09/24-09:00 2017/09/26-09:00 2017/09/28-09:00 2017/09/30-09:00 2017/10/02-09:00 2017/10/04-09:00 2017/10/06-09:00 2017/10/08-09:00 2017/10/10-09:00 2017/10/12-09:00 2017/10/14-09:00 2017/10/16-09:00 2017/10/18-09:00 2017/10/20-09:00 2017/10/22-09:00 2017/10/24-09:00 2017/10/26-09:00 2017/10/28-09:00 2017/10/30-09:00 2017/11/01-09:00 Memory Usage [MBytes] Day Memory Usage for Four Months Memory Usage ಈతॲཧ ຖSFMPBE SFMPBEఀࢭத SFMPBEఀࢭத ϦϑΝΫλϦϯά ສυϝΠϯ)5514Խ ສυϝΠϯ)5514Խ SFMPBEఀࢭ