OneOps

Who am I ? たかはしなおと TwitterID: tnaoto 富士通研究所所属日本Cloud Foundryグループ
監事 Copyright 2016 FUJITSU LABORATORIES LTD 1

振り返り n 前回のPaaS勉強会 2 Copyright 2016 FUJITSU LABORATORIES LTD by
@jacopen

ザ・エンタープライズ呼んだ（´・ω・｀）？ 5 Copyright 2016 FUJITSU LABORATORIES LTD * 富士通
汐留本社黙っているわけにはいかない

OneOps Cloud Application lifecycle Management 7 Copyright 2016 FUJITSU LABORATORIES
LTD

LTD なんか日経コンピュータあたりの表紙になりそうな文言

LTD なんか日経コンピュータあたりの表紙になりそうな文言釣るのも釣れるのは、エンタープライズな会社ですけどね

OneOps Cloud Application lifecycle Management Walmartが公開したCI/CDをするためのOSS Walmartのショッピングサイト (walmart.com、Sam’s Clubなど)は OneOpsを使って運用されているらしい
Copyright 2016 FUJITSU LABORATORIES LTD 10

ビジネスメリット n PaaS 2.0 n ビジネスとテクノロジー、運用の緩衝を減らす n イノベーションが加速する • すぐに作って試せるから
n 継続的ライフサイクル管理 • OneOpsを使って起動されたアプリケーションは、オートパイロットによりオートスケール、オートヒール／リペアが可能 n ポータビリティ • ”Cloud shop”から、テクノロジー、スケーラビリティ、セキュリティ、カスタマサービス、もしくは低コストを選択でき、アプリケーションやデータベースを様々なプロバイダで稼働出来る n OneOpsは、開発者と運用者の間にあるクラウド環境へのデリバリをコントロールする。クラウドアプリケーションに必要なものをワンストップで提供する 21 Copyright 2016 FUJITSU LABORATORIES LTD http://oneops.com/benefits.html

開発者のメリット n One Design n Any Cloud n All Environments
n Cloud Technology Agnostic n Manage Deployments n High Availability n Desigin catalog n Auto Healing n Auto replace n Many Software Products supported n Auto Scaling n API 24 Copyright 2016 FUJITSU LABORATORIES LTD n Monitoring n Best Practices are the default n Oneops was build to scale n Continuous delivery n Environment profiles

n Cloud Technology Agnostic n Manage Deployments n High Availability n Desigin catalog n Auto Healing n Auto replace n Many Software Products supported n Auto Scaling n API 25 Copyright 2016 FUJITSU LABORATORIES LTD n Monitoring n Best Practices are the default n OneOps was build to scale n Continuous delivery n Environment profiles エンタープライズが気にしそうな文言注：個人的な見解です

n Cloud Technology Agnostic n Manage Deployments n High Availability n Desigin catalog n Auto Healing n Auto replace n Many Software Products supported n Auto Scaling n API 26 Copyright 2016 FUJITSU LABORATORIES LTD n Monitoring n Best Practices are the default n OneOps was build to scale n Continuous delivery n Environment profiles 気にはなるけど、本番は怖い感じ注：個人的な見解です

運用者 n Monitoring n Alerting n LADP/AD Identity Integration n
Configuration Management system n Oneops is naturally compliance – ready n Cross cloud showback n Cross cloud quota n Configuration policy governance n Custom defined clouds n Cloud migration made easy 27 Copyright 2016 FUJITSU LABORATORIES LTD n Extensive cloud usage reporting n Oneops managing oneops n Automation technology agnostic n Saas ready at birth n Designed and proven to scale n Commitment to open source n Oneops has a bright future

運用者 n Monitoring n Alerting n LADP/AD Identity Integration n
Configuration Management system n Oneops is naturally compliance – ready n Cross cloud showback n Cross cloud quota n Configuration policy governance n Custom defined clouds n Cloud migration made easy 28 Copyright 2016 FUJITSU LABORATORIES LTD n Extensive cloud usage reporting n OneOps managing OneOps n Automation technology agnostic n Saas ready at birth n Designed and proven to scale n Commitment to open source n OneOps has a bright future エンタープライズが気にしそうな文言ただし、実際の運用者ではない場合も多い注：個人的な見解です

Integration n Support cloud n Openstack(Liberty,kilo,juno) n Rackspace n Azure
n AWS n CenturyLink n Support product n Couchbase n Tomcat n Nodejs n Docker n Cassandra n Datastax n Potgresql n Netscaler 29 Copyright 2016 FUJITSU LABORATORIES LTD n Ubuntu 14.04 n Centos 7 n Ruby n php n Perl n Apache n Elasticsearch n Zookeeper n MySLQ n Redis n Squid n Oracle n Rabbitmq n ActiveMQ n TIBCO n Java n JBOSS n Solr n Liferay n Go n Flume n Haproxy

Integration n Support cloud n Openstack(Liberty,kilo,juno) n Rackspace n Azure
n AWS n CenturyLink n Support product n Couchbase n Tomcat n Nodejs n Docker n Cassandra n Datastax n Potgresql n Netscaler 30 Copyright 2016 FUJITSU LABORATORIES LTD n Ubuntu 14.04 n Centos 7 n Ruby n php n Perl n Apache n Elasticsearch n Zookeeper n MySLQ n Redis n Squid n Oracle n Rabbitmq n ActiveMQ n TIBCO n Java n JBOSS n Solr n Liferay n Go n Flume n Haproxy 開発運用より要件定義で重宝されそうな感じ

OneOps System Architecture 35 Copyright 2016 FUJITSU LABORATORIES LTD ruby
Java ruby

OneOps System Architecture 36 Copyright 2016 FUJITSU LABORATORIES LTD Ruby
OneOps? Java Walmart? Ruby OneOps? 注）コードの品質状況から勝手に判断しています

OneOpsには大きく2つの役割があるオペーレーター（管理者） GUI(CLI)を操作して、アプリケーションをデプロイする人アプリケーション開発者も含まれている気がする開発者アプリケーションのための設定を作る人 a.k.a インフラエンジニア 37 Copyright
2016 FUJITSU LABORATORIES LTD

アプリケーションを定義 Assembiles Platformを定義利用するpack（アプリケーションテンプレート）を選択 Designを定義アプリケーションにコードを定義、利用OSの指定など Transion デプロイ名やDNS名、利用するクラウドを選択 Operation VMを作って、アプリを入れる
40 Copyright 2016 FUJITSU LABORATORIES LTD

動作の実態管理サーバの上でchef soloを実行して VM作成やサービス設定を行い、サービスや作成したVMに対して、 knife solo(chef solo)を実行 41 Copyright

大きく４つ Catalog 構成済みテンプレート？ Cloud 利用するクラウド、サービスの定義 Component 実行対象の検索と、レシピの実体 Packs Componentの依存関係や定義情報集。いわゆる知見集 47
Copyright 2016 FUJITSU LABORATORIES LTD

Cloud 利用するクラウド、サービスの定義接続エンジンがFogなので、アクセス情報用のテンプレを作る 49 Copyright 2016 FUJITSU LABORATORIES LTD
https://github.com/oneops/circuit-oneops-1/tree/master/clouds

Component 実行対象の検索と、レシピの実体書き方は、chefのrecipeそのままただし、イベントトリガーからフックされるように、ファイル名が規定されている add, update, delete, start, stopなど
各イベントに合わせた状態を定義しておく必要がある例えば、addでインストール、deleteで削除やロールバック処理 51 Copyright 2016 FUJITSU LABORATORIES LTD

監視プロビジョニングしたVMに nagiosサーバがインストールされるこのnagiosの監視トリガーに、 oneopsが用意したスクリプトを実行させている 55 Copyright 2016 FUJITSU LABORATORIES
LTD

このあたりのstartガイドがあるが、他のプロジェクト参考にして書いてね http://oneops.github.io/developer/getting-started/ っていう投げやり感そして、どうやっても書ける気がしない絶望開発環境くらい提供するのがエンタープライズの仕事だと思う 58 Copyright 2016 FUJITSU
LABORATORIES LTD

まとめると開発者: recipe書いてpack書いて、管理者：circuit-oneops-1をsyncしてオペーレーター：デプロイ 59 Copyright 2016 FUJITSU LABORATORIES
LTD

僕がOneOpsがエンタープライズの作りじゃないと思う理由 61 Copyright 2016 FUJITSU LABORATORIES LTD 1. コードのリリース管理が機能してない 2.
動作バイナリの配布がなく、コードをユーザにビルドさせる 3. コード自体の品質 4. OSSライセンスの理解

68 Copyright 2016 FUJITSU LABORATORIES LTD https://github.com/oneops/dev-tools/commits/master/setup-scripts/install_build_srvr.sh Masterからstableでビルド引数化日付入り最新stableでビルド
つい最近追加されてたでも、jenkinsだけですべてのセットアップしてるわけじゃないんで・・・

2. 動作バイナリの配布がなく、コードをユーザにビルドさせる Setup時にjenkinsがバイナリを生成する (warとgem) 69 Copyright 2016 FUJITSU LABORATORIES
LTD

よく分からない原因で、何度もセットアップ叩く状況に・・・ 73 Copyright 2016 FUJITSU LABORATORIES LTD このjenkinsを実行する前後でもshellでセットアップが流れていますので、これだけで完結してないジョブは成功しているけど、
実態は失敗していることもある・・・

4. OSSライセンス OneOpeはApache License, Version 2.0で提供 82 Copyright 2016 FUJITSU
LABORATORIES LTD

GPL v2ライセンス Apache License, Version 2.0と互換性なし Javaの場合、import文書いただけでもアウト使う側のコードもGPLv2にならないといけない伝播性が高い細かくいうと、同じプロセス上に乗るだけで実はNG プロセスを分けて使うが定石

Pivotal製 license_finder https://github.com/pivotal/LicenseFinder 91 Copyright 2016 FUJITSU LABORATORIES LTD 画面に入りきってないけど、問題があるGPLv2は１つだけ
ちなみにこれ、富士通がCloud Foundryの開発の中で pivotalに働きかけて作ってもらったものの１つらしい

僕がOneOpsがエンタープライズの作りじゃないと思う理由 92 Copyright 2016 FUJITSU LABORATORIES LTD 1. コードのリリース管理が機能してない 2.
動作バイナリの配布がなく、コードをユーザにビルドさせる 3. コード自体の品質 4. OSSライセンスの理解うちのエンタープライズはこうだ！っていう殴りこみ、ウェルカムです

力技デプロイ Chefのrecipeをいじって、実行が成功したように見せかけてパスする例えばアプリケーションのデプロイにDNSサービスが必須になっている OpenStack DNSサービス(Designate)の部分が、 Designateを立てても怪しかったので、recipeをまるっとNOP化 96 Copyright

注意事項 OneOpsの管理サーバがVMを作って、 recipe実行するが、Floating-ipに対応してないので、作成するVMと同じ仮想ルータ配下にいる必要がある Vagrantで手元でOneOps作ってもダメだったってこと 97 Copyright 2016 FUJITSU LABORATORIES
LTD

デバックポイント１ GUIのログ GUIはrailsだが、動作がrails serverのdevelopmentモード動作ホームは、/opt/oneops ログは、/opt/oneops/logs/ railsサーバなので、動作がそもそも遅い OneOpsが動くVMは、8G以上（推奨16G以上）あるとよさ気 98 Copyright

ログ類 Chefの実行ログ /opt/oneops/inductor/clouds-available/shared/log/inductor.log Tomcatのログ /usr/local/tomcat7/logs/catalina.out 99 Copyright 2016 FUJITSU LABORATORIES
LTD

デバックポイント１失敗事案 rails serverが遅いので、unicorn化したその１ログイン画面は招待がないと入れないモードになるコード追跡の結果、configにinvitationという項目を発見しOFF 100 Copyright 2016
FUJITSU LABORATORIES LTD

デバックポイント１失敗事案 rails serverが遅いので、unicorn化したその２ Railsが呼び出す、activeresourceが謎のNULLを吐く解析の結果、CMSのURLがNULLになるなお、これがNULLになると、そもそもGUIが立ち上がらなかったり、ログイン直後にエラーになって何も出来ないその趣旨のログは出ないので、
NULLになってエラーということがわかるまでも大変 3営業日くらいかけたけど原因分からず・・・。 101 Copyright 2016 FUJITSU LABORATORIES LTD

デバックポイント2 内部サービスが動いているのか、動いていないのかが分からないサービス起動スクリプトが壊れていて起動していないコンソールにはさっぱり原因が分からないようなエラーが出る内部が非同期処理のため、オペーレーターからは問題なくデプロイ操作が出来るように見えるサービス自身の死活監視がない 102 Copyright

仕方ないので、rubyを2.0.0にして再度セットアップを実行ちなみに、後述するcentos7だとシステムrubyを使っていて、これが2.0.0だったりする PR出しといた＝＞マージされてた 107 Copyright 2016 FUJITSU LABORATORIES
LTD

最新情報 CentOS7で動きません画面は出ますが、組織が作れません 111 Copyright 2016 FUJITSU LABORATORIES LTD CMSが500エラーを返すも、CMS側にログなし・・・
ほんとに、OneOps使ってる？

まとめ考え方としては有益ほんとに使ってきたの？と思うくらいの品質エンタープライズのモノ作りは、こんなのじゃ出荷許されませんコードを見る限り、メンテツライなーって感じここは同じ・・・ OSS化して、メンテナンスコストを下げたいという意識はありそうが、人が寄ってくるような仕掛けはあまりないこのあたりの策の無さは、エンタープライズ 115
Copyright 2016 FUJITSU LABORATORIES LTD

OneOps

OneOps

More Decks by Naoto TAKAHASHi

Other Decks in Technology

Featured

Transcript