Upgrade to Pro — share decks privately, control downloads, hide ads and more …

大規模並行処理バッチシステムのAWS移行

Sponsored · Ship Features Fearlessly Turn features on and off without deploys. Used by thousands of Ruby developers. →
Avatar for t-kuroiwa t-kuroiwa
May 31, 2019
Technology
330
0

 大規模並行処理バッチシステムのAWS移行

Avatar for t-kuroiwa

t-kuroiwa

May 31, 2019

Other Decks in Technology

See All in Technology
サイボウズ、プラットフォームエンジニアリング始めるってよ ― プラットフォームチームの事業貢献と組織アラインメントの強化
Avatar for Shin'ya Ueoka ueokande
0
120
全社統制を維持しながら現場負担をどう減らすか〜プラットフォームチームとセキュリティチームで進めたSecurity Hub活用によるAWS統制の見直し〜/secjaws-security-hub-custom-insights
Avatar for みずほリサーチ&テクノロジーズ株式会社 先端技術研究部 mhrtech
1
620
生成AI時代に信頼性をどう保ち続けるか - Policy as Code の実践
Avatar for akitok akitok_
1
510
Oracle AI Database@AWS：サービス概要のご紹介
Avatar for oracle4engineer oracle4engineer
PRO
4
2.6k
DI コンテナ自動生成ツールを実装してみた / intro-autodi
Avatar for uhzz uhzz
0
440
AI全盛の今だからこそ、あえてもう一度振り返るAPIの基礎
Avatar for Makky12 smt7174
3
140
【2026年版】プロジェクトマネジメント実践論｜現役エンジニアが語る！～チームでモノづくりをする時のコツとは？～
Avatar for MIXI ENGINEERS mixi_engineers
PRO
1
110
【禁断】Obsidianの第二の脳に「知の巨人」と呼ばれた師匠の脳をロードしてみた
Avatar for 長津孝輔 nagatsu
0
250
AIのために、AIを使った、Effect-TSからの脱却 〜テストを活用した安全なリファクタリングの進め方〜
Avatar for 株式会社ビットキー / Bitkey Inc. bitkey
PRO
0
140
ラズパイ & Picoで入門：Zephyr(RTOS)の環境構築からビルドまでの紹介
Avatar for misoji engineer iotengineer22
0
110
論文紹介：Pixal3D (SIGGRAPH 2026)
Avatar for TakatoYoshikawa tenten0727
0
590
CARTA HOLDINGS エンジニア向け 採用ピッチ資料 / CARTA-GUIDE-for-Engineers
Avatar for CARTA Engineering carta_engineering
0
47k

Featured

See All Featured
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
Avatar for Eileen M. Uchitelle eileencodes
141
35k
Information Architects: The Missing Link in Design Systems
Avatar for Michelle Chin soysaucechin
0
930
What Being in a Rock Band Can Teach Us About Real World SEO
Avatar for Ade Holder 427marketing
0
230
Odyssey Design
Avatar for Ryan Kendrick rkendrick25
PRO
2
620
Agile Actions for Facilitating Distributed Teams - ADO2019
Avatar for Mark Kilby mkilby
0
190
Everyday Curiosity
Avatar for Cassini Nazir cassininazir
0
210
sira's awesome portfolio website redesign presentation
Avatar for ElsiraPls elsirapls
0
250
Six Lessons from altMBA
Avatar for Skipper Chong Warson skipperchong
29
4.2k
Taking LLMs out of the black box: A practical guide to human-in-the-loop distillation
Avatar for Ines Montani inesmontani
PRO
3
2.2k
Applied NLP in the Age of Generative AI
Avatar for Ines Montani inesmontani
PRO
4
2.2k
Art, The Web, and Tiny UX
Avatar for Lynn Fisher lynnandtonic
304
21k
brightonSEO & MeasureFest 2025 - Christian Goodrich - Winning strategies for Black Friday CRO & PPC
Avatar for Christian Goodrich cargoodrich
3
700

Transcript

  1. 2 0 1 9 / 5 / 3 1 大規模並行処理バッチシステムの

    移行

  2. 利幸（くろいわ としゆき） 年入社 年間在籍 • • • 行、お酒

  3. 年 2017年 2018年 年 2014年 2015年 2016年 2017年 2018年 率200％

    率推移 率推移 年7月21日～8月6日

  4. 行したのか？ 行の歴史

  5. 行したのか？ 行の歴史

  6. None

  7. 理で、非常に重要なバッチの一つ。 行処理にて 了しないと

  8. 理時間

  9. None
  10. None

  11. 行時間が超過。 行時間の要件を満たせなくなった。 行したのか？ 行

  12. 行したのか？ 行の歴史

  13. None
  14. None
  15. None
  16. None
  17. None

  18. 度不足により、要件を満たせない

  19. None
  20. None

  21. 度不足により、

  22. None
  23. None

  24. 度不足により、要件を満たせない

  25. None

  26. 行したのか？ 行の歴史

  27. 行時間を短くできないか？

  28. 理 行処理 行時間

  29. 率 理

  30. None

  31.  理における、 行処理  理に必要な分だけ、 理後に自動停止   理分散の方式で、コンテナ起動時、キューからデータ

  32.  料  裏で動作するec2インスタンスが費用対象となる。  量課金制 理時間が短縮。

  33. None
  34. None

  35. 率

  36. 理数 理時間

  37. 行したのか？ 行の歴史

  38. 行型バッチについては、AWSbatchを使用することで、 行時間の短縮が劇的に行えることが分かった。 理をしなくて済む。(運用が楽)

  39. None
  40. None