Upgrade to Pro — share decks privately, control downloads, hide ads and more …

はじめまして 株式会社リンクです。Mackerelはじめました。 / Mackerel Day...

mackerelio
December 23, 2019

はじめまして 株式会社リンクです。Mackerelはじめました。 / Mackerel Day #2 2019.12.23 登壇資料(株式会社リンク)

Mackerel Day #2 (2019.12.23開催)での、株式会社リンク様のご登壇資料です。

mackerelio

December 23, 2019
Tweet

More Decks by mackerelio

Other Decks in Technology

Transcript

  1. 3 ⾃⼰紹介 ‧⼭本 誠⼀郎(やまもと せいいちろう) ‧1976年⽣まれ 43歳 ‧2児(3歳男と6歳男)の⽗ ‧株式会社リンク サポート部 部⻑  (ワンスタッド株式会社 代表取締役) 【経歴】 派遣会社のCMが湯⽔のように流れた2000年、抗うことなく派遣会社に⼊社し、 ⼊社1週間で国営の電話会社に派遣され社会⼈⼀年⽬がはじまる。

    都会派サラリーマンを⽬指すが、2ヶ⽉後にはスーツを脱がされ 、作業着でLANケーブルの作成‧ 敷設、ネットワーク機器の設定や設置、障害対応で⾛り回る毎⽇ 2004年にMSP(マネージド‧サービス‧プロバイダ)へ転職し、運⽤のノウハウをに⾒つけ、 仕事の厳しさ‧楽しさ‧⾯⽩さを感じる。 SIerやコンサルなどの経験を積み、2014年に株式会社リンクに⼊社し、ベアメタルクラウドの⽴ち上げ に関わる。 気づいたらインフラに関わり続けて20年‧‧‧‧
  2. 4 株式会社リンクって? ೥݄೔૑ۀ ɹࠓ೥Ͱ ظ໨ͷاۀͰ͢ɻ *5ΠϯϑϥࣄۀΛϕʔεͱͨ͠෯޿͍*5αʔϏεΛఏڙ͍ͯ͠·͢ɻ 1996年に富⼭に本社を構えるエーティーワークスとの協業で専⽤サーバサービスをスタート。 ピーク時の運⽤対象サーバは2万台を超える。 2006年にスタートしたクラウド型テレフォニーサービス。 導⼊社数1,200‧稼働席数24,000を突破し、3年連続シェアNo.

    を達成したクラウド型CTI「BIZTEL」。 「PCI DSS Ready Cloud」は、クレジットカードの会員情報を安全に取り扱うことを⽬的として策定された、クレジット カード業界の世界的なセキュリティ基準「PCIDSS」に準拠するために必要なリソースをクラウド上で提供するサービス。 岩⼿県岩泉町で、1年を通して⼭に⽜を放牧する⾃然放牧酪農の牧場を運営しています。 2014年から物理サーバをベースとしたクラウドサービス「リンクベアメタルクラウド」をスタート 物理サーバの安定した性能と仮想サーバの⼿軽さを併せ持つサーバサービス。
  3. 6 2000年前後のMSPって? データセンタにサーバを設置する考えが⼀般的:⾃社で監視 SMBでホームページなどの⽤途でホスティング:ホスティング業者で監視 監視ツールは今と⽐べると⾮常に⾼価だったため、監視サービスの利⽤料も⾼額 ▪監視(1OS)  万円 ▪DCオンサイト 5万〜10万円 1台 10万円前後 監視サービスの⽐較も

    ‧監視項⽬の種類 ‧監視項⽬の数 運⽤を提供する側は ‧24時間体制の監視ルームはあったが、アラートメール/監視 マップ/警⼦ちゃんをトリガーにエンジニアへエスカレーション ‧エンジニアは肌⾝離さず⾮常に重いPCを持ち歩き対応
  4. 14 弊社の監視システム 対象サービス:ベアメタルクラウド 監視サービス:サーバご利⽤中のお客様に以下をご提供 • 標準監視:HW関連/死活/リソース(CPU/メモリ/HDD/Traffic) • 拡張監視:ログ監視/プロセス監視などを始めとするユーザサービスに特化した項⽬ • 障害対応:⼿順書および⼝頭指⽰でのオペレーション実⾏

    • 技術⽀援サービス:24時間365⽇エンジニアが直接電話を受け対応 • ミドルウェアの設計/構築/チューニング • 障害対応はもちろん、切り分けや原因調査なども • ユーザ数:400社 • システム系: 500ノード • ユーザ系:2100ノード 監視対象数
  5. 15 弊社の監視システム 監視システム構成  ベアメタルクラウド内にnagios manager: 台/nagios worker: 台/nagios proxy: 台/NFS:

    台  さくらさんおよびAWSさん上に監視の監視:2台2式 *OUFSOFU OBHJPTNBOBHFS º OBHJPTXPSLFS º ɾɾɾɾ OBHJPTQSPYZ º [BCCJY º ͓٬༷γεςϜ ɾɾɾɾ
  6. 16 監視システム維持費⽤ • 物理サーバ:15台 • クラウドサービス:5インスタンス • ラック:1/2 • 管理者:0.5⼈⽉

    • 開発費⽤:100万 • 年間保守費⽤:200万 年間3,000万〜4,000万円 参考)監視サービスを含めたポータルシステムを構築した場合は年間1億程度
  7. 17 Mackerel採⽤のメリット • 監視システムの縮⼩ • エンジニアリソース縮⼩ • 監視トレンドの調査や検証の効率化 • インシデント管理ツールとの連携

    Slack、Chatwork、Reactioなど コストダウン & 効率化 これらのコストを既存サービスの強化や新サービスの開発へ分配し、⾃社の強みを強化‧構築することに集中 • サポートチームの強化 • 運⽤設計チームの強化 • サービス企画チームの強化 年間1,500万円削減
  8. 23 ⾃⼰紹介 [⽒名]   菱沼 憲司(ひしぬま けんじ) [出⾝地]   ⻘森県上北郡おいらせ町(旧百⽯町) [経歴]   SIer:インフラ&プロジェクトのイロハを勉強   MSP:インフラ運⽤、サービスの重要性を勉強   クラウド:クラウド基盤の開発、サービス企画‧開発を勉強

      現在:エバンジェリストから役職者へ(技術部⻑) [趣味(続けていること)]   ゴルフ:⼦供が⽣まれてからは半年に2回くらい   スノーボード:毎シーズン3回程度   ランニング:以前は110キロ⾛ってましたが、最近はサボり気味‧‧‧
  9. 26 ෺ཧαʔό サービス基盤のご紹介 ユーザへ⾼い到達率を実現する「メールリレーサービス」です。 リーズナブル な価格 多機能 ⾼い 到達率 ベアメールの3つの特⻑

    例えば、会員登録時の完了メールや商品購⼊や予約時の確認メールなど、ユーザに確実にメールを届けたい場合にキャリアからのブロックを避け、⾼い到達率でメー ル配信を⾏うことができるようになります。メール配信の設定や配信統計の確認、ログ検索、ログダウンロードまで、お使いのコントロールパネルから⾏うことがで きます(※リンクベアメタルクラウドをお使いでないお客さまでもご利⽤いただけます)。
  10. 27 サービス基盤のご紹介 リレーメール配信利⽤例 Gmail docomo KDDI SoftBank ✖ メールが届かない ✖

    ブロック Gmail docomo KDDI SoftBank 到達率UP ベアメール IP IP IP リレー配信 複数のIPから配信  同⼀のIPから配信 海外IPから配信 利⽤例 ✓ 会員向けの⾃社商品PR⽤のメール配信 ✓ 会員向けに広告⽤のメール配信 会員向けのメルマガなどで⼤量にメールを配信をする場合、同⼀IPから配 信するとキャリアからブロックされ、配信ができなくなるといったケース があります。 例えば、ECサイトなどの場合、会員向けのメール配信は売上に影響します ので、メールの到達率の向上はサービス運営に重要な要素です。 ⾃社サービス ECサイト メルマガ配信 トランザクション メール → → 開封率‧売上アップ 売上に影響 SMTPサーバ
  11. 29 サービス基盤のご紹介 4FOEFS4FSWFS <6TFS"> 1PTUpY $POUBJOFS <6TFS#> 1PTUpY $POUBJOFS <6TFS">

    1PTUpY $POUBJOFS <6TFS#> 1PTUpY $POUBJOFS 65.ʢ-#ʣ 6TFS"(*1 6TFS#(*1 SMTP Auth %PDLFS)PTU %PDLFS)PTU SMTP Docker Log syslog転送 プライベートリポジトリ コンテナイメージ保管 コンテナイメージ ダウンロード %PDLFS45( <%FW> 1PTUpY$POUBJOFS イメージ アップロード ‧特定処理でしか利⽤しないためVMは不要 ‧リソース削減、コスト削減が最重要課題 ‧単純にリソースを集中できる物理サーバと相 性が良い ίϯςφ࠾༻ͨ͠ཧ༝ ‧Dockerのペストプラクティスをどこまで追求す るか ‧メールシステムのためIPアドレスの存在が必須 ‧Kubernetesなどのクラスタ、運⽤管理は利⽤ しない ‧役割分割、冗⻑化、コンテナデリバリ⾃動 化は独⾃で構築 ߏஙͷϙΠϯτ
  12. 31 Nagiosで監視している内容 "-*7&؂ࢹ αʔόͷՔಇঢ়گΛ؂ࢹ ɾ1JOH؂ࢹ ɾ44)؂ࢹ ɾϋʔυ΢ΣΞ؂ࢹ ͳͲ ΞϓϦɾϛυϧ΢ΣΞͷՔಇ ঢ়گΛ؂ࢹ

    ɾΞϓϦͷϓϩηε؂ࢹ ɾϛυϧ΢ΣΞͷϓϩηε؂ ࢹ ɾ5$16%1ϙʔτ؂ࢹ ͳͲ 04ͷՔಇঢ়گΛ؂ࢹ ɾ$16-PBE"WFSBHF ɾϝϞϦ࢖༻཰ ɾσΟεΫ࢖༻཰ ɾωοτϫʔΫCQT ͳͲ ϓϩηεɾϙʔτ ؂ࢹ ϦιʔεɾτϥϑΟοΫ ؂ࢹ 04ɾΞϓϦͷϩάΛΩʔϫʔ υݕ஌Ͱ؂ࢹ ɾγεςϜϩά؂ࢹ ɾΞϓϦϩά؂ࢹ ͳͲ ϩά؂ࢹ ؂ࢹ࣮૷ͷϙΠϯτ ɾΞϥʔτ಺༰Ͱ͋Δఔ౓੾Γ෼͚ग़དྷΔ͜ͱΛॏࢹʂ
  13. 32 Nagiosで監視している内容 ֎ܗ؂ࢹ ϓϥάΠϯ؂ࢹ ίϯςφ؂ࢹ ఏڙαʔϏεͱಉ༷ͷܦ࿏͔Β઀ ଓ؂ࢹ ɾ֎෦͔Βͷ4.51઀ଓ؂ࢹ ɾ֎෦͔Βͷ"1* IUUQT

    ઀ଓ؂ ࢹ ͳͲ /BHJPTϓϥάΠϯɾಠࣗ։ൃϓ ϥάΠϯ؂ࢹ ɾ࣌ࠁಉظঢ়ଶͷ؂ࢹ ɾ%#SFQMJDBUJPO؂ࢹ ɾ಺෦%/4ͷ໊લղܾͷ؂ࢹ ɾϝʔϧΩϡʔͷ؂ࢹ ͳͲ %PDLFSͰಈ͍͍ͯΔίϯςφͷ Քಇঢ়گΛ؂ࢹ ɾૄ௨؂ࢹ ɾϙʔτ؂ࢹ ɾεςʔλε؂ࢹ ɾϝτϦοΫ؂ࢹ ͳͲ ؂ࢹ࣮૷ͷϙΠϯτ ɾΞϥʔτ಺༰Ͱ͋Δఔ౓੾Γ෼͚ग़དྷΔ͜ͱΛॏࢹʂ