ちいさなクラウド業者やってみた

Kernel/VM #11

Transcript

1. 小さなクラウド業 者やってみた katsyoshi
2. whoami なまえ： katsyoshi fav.rb、fluent-plugin-mecab、fluent- plugin-axlsx
3. 目的 おかねを積まずに大量のサーバがほ しい
4. 目的 Ruby on Rails が動く環境が欲し い 80台ほど 個人用の Linux(CentOS 6.5) はあるが、容量 制限がある(1GB) Windows共用だし、Ruby環境整えないといけ ないし、管理者権限どうだったけな
5. 目的 必要な機能 Ruby on Rails 環境 Ruby、Webサーバ サーバ管理 Linux環境に慣れる
6. 目的 お金をかけずに大量にサーバが 欲しい EC2？、Heroku？ IPあまってるし、自前でやるか
7. 目的 いまあるマシンでやろう メモリ192GBのKVMサーバ これどうやって動かすんだっけ？ 一部メモリ認識しないとかいう問題もあった よな？ 余ってるPCでやるかー
8. 想定する利用方法 一週間でつかう時間が決まって る 4時間しかつかわない 同時にアクセス およそ80人
9. マシン構成 安いBTOマシン CPU: Intel(R) Core(TM) i3 CPU 550 @ 3.20GHz Memory: 16GB OS: Ubuntu 14.04 LXC: 1.0.7-ubuntu
10. LXC KVMと比べてオーバーヘッド少な いし(?)これにしよう。 とりあえずデフォルトでやってみよ う。
11. 失敗 70人くらいで実行!! $ bundle install --path .bundle/gems # 2時間後インストール終了 $ bundle exec rails s -b 0.0.0.0 # ここは5分ほどで起動し、アクセス これはなんとかせねば とりあえず分散すればいいんじゃね
12. 対応策 同じマシン3台で20台づつ分散し よう! なんか1台ネットワークに繋がらないん だが… とりあえず2台で ここでもミスが…
13. 再構成 Precision T1500 CPU: Intel(R) Core(TM) i7 CPU 860 @ 2.80GHz Memory: 32GB, or 16GB OS: Ubuntu 14.04 LXC: 1.0.7-ubuntu 実行時、メモリ量がちがうこと に気づく 今回は問題なく実行完了
14. ベンチマーク とりあえず、LXC利用しないで実 行 80並列 bundle install --path .bundle/gems > /dev/null &
15. 結果 はやい方 (i7) 2015年 6月 6日 土曜日 00:46:01 JST 2015年 6月 6日 土曜日 01:05:30 JST おそい方 (i3) NICがお亡くなりに… ping も ssh も通らなくなってた そもそもましんがおなくなりに… > VGA/DVIともに信号が出力されていないようです。
16. まとめ LXCでも100台つらい 30台ぐらいだとなんとかうごく リソース制限かければいいもっとうご く？
17. 実際に動いてるログとってみ た 実際の運用マシン 再構築したマシンにそれぞれLXC35台 づつ
18. 運用時の負荷 13~16時半ごろ まで(MEM 32G: CPU)
19. 運用時の負荷 13~16時半ごろ まで(MEM 32G: MEM)
20. 運用時の負荷 13~16時半ごろ まで(MEM 32G: IO)
21. 運用時の負荷 13~16時半ごろ まで(MEM 32G: NET)
22. 運用時の負荷 13~16時半ごろ まで(MEM 32G: DISK)
23. 運用時の負荷 13~16時半ごろ まで(MEM 32G: SWAP)
24. 運用時の負荷 13~16時半ごろ まで(MEM 16G: CPU)
25. 運用時の負荷 13~16時半ごろ まで(MEM 16G: MEM)
26. 運用時の負荷 13~16時半ごろ まで(MEM 16G: IO)
27. 運用時の負荷 13~16時半ごろ まで(MEM 16G: NET)
28. 運用時の負荷 13~16時半ごろ まで(MEM 16G: DISK)
29. 運用時の負荷 13~16時半ごろ まで(MEM 16G: SWAP)
30. 運用時の負荷 とってみたがとくに問題なさそ う… メモリ使用量が多いがそこまで read/writeも少なかったし メモリたりてるのでswapもしてないし 実際の運用だとこの構成でも問