Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
modern vCenter alert nortification(M@STER VERSION)
Search
MasahiroIrie
February 20, 2020
Technology
0
1.4k
modern vCenter alert nortification(M@STER VERSION)
VMware DevOps Meetup #4 (2020/02/20)
MasahiroIrie
February 20, 2020
Tweet
Share
More Decks by MasahiroIrie
See All by MasahiroIrie
The key to VCP-VCF
mirie_sd
0
290
Now is the time to check the vSphere Security Configuration and Hardening Guide
mirie_sd
0
1k
Using vROPs API with Swagger
mirie_sd
0
120
Cooking operations with Salt
mirie_sd
0
620
Blog vExperts use
mirie_sd
0
170
Talk about TAS before forgetting
mirie_sd
0
230
Cooking the server with Salt (REM@STER Version)
mirie_sd
0
630
Getting VM console with WebMKS
mirie_sd
0
2.1k
20190705_VMwareDevOpsMeetup.pdf
mirie_sd
0
1.1k
Other Decks in Technology
See All in Technology
個人開発から公式機能へ: PlaywrightとRailsをつなげた3年の軌跡
yusukeiwaki
11
2.7k
Googleマップ/Earthが一般化した 地図タイルのイマ
mapconcierge4agu
1
200
The 5 Obstacles to High-Performing Teams
mdalmijn
0
270
スタートアップ1人目QAエンジニアが QAチームを立ち上げ、“個”からチーム、 そして“組織”に成長するまで / How to set up QA team at reiwatravel
mii3king
1
1.1k
5分で紹介する生成AIエージェントとAmazon Bedrock Agents / 5-minutes introduction to generative AI agents and Amazon Bedrock Agents
hideakiaoyagi
0
220
TAMとre:Capセキュリティ編 〜拡張脅威検出デモを添えて〜
fujiihda
1
110
まだ間に合う! エンジニアのための生成AIアプリ開発入門 on AWS
minorun365
PRO
4
580
Developers Summit 2025 浅野卓也(13-B-7 LegalOn Technologies)
legalontechnologies
PRO
0
150
アジャイル開発とスクラム
araihara
0
160
AndroidXR 開発ツールごとの できることできないこと
donabe3
0
110
家電アプリ共通PF "Linova" のAPI利用とPostman活用事例ご紹介
yukiogawa
0
130
技術的負債解消の取り組みと専門チームのお話 #技術的負債_Findy
bengo4com
1
1.2k
Featured
See All Featured
"I'm Feeling Lucky" - Building Great Search Experiences for Today's Users (#IAC19)
danielanewman
226
22k
Creating an realtime collaboration tool: Agile Flush - .NET Oxford
marcduiker
27
1.9k
Rebuilding a faster, lazier Slack
samanthasiow
79
8.8k
The Success of Rails: Ensuring Growth for the Next 100 Years
eileencodes
44
7k
Fashionably flexible responsive web design (full day workshop)
malarkey
406
66k
Measuring & Analyzing Core Web Vitals
bluesmoon
6
240
Product Roadmaps are Hard
iamctodd
PRO
50
11k
ReactJS: Keep Simple. Everything can be a component!
pedronauck
666
120k
Save Time (by Creating Custom Rails Generators)
garrettdimon
PRO
29
1k
What’s in a name? Adding method to the madness
productmarketing
PRO
22
3.3k
The Pragmatic Product Professional
lauravandoore
32
6.4k
Improving Core Web Vitals using Speculation Rules API
sergeychernyshev
8
270
Transcript
2020/2/20 VMware DevOps Meetup #4 @IrieMasahiro vCenter アラートを今風に通知する (M@STER VERSION)
自己紹介 入江 正博 @IrieMasahiro • 某情報通信系企業 クラウド/インフラコンサルタント • VMUG 仮想インフラ部会 •
vExpert 2019
まずはお詫び • vExpert Advent Calender 2019 にて 自分が担当したネタ(2019/12/10分) https://vhoge.hateblo.jp/entry/2019/12/10/001859 「vCenter
アラートを今風に通知する」 • 実は投稿までに検証しきれなかった&記事ボリュー ムが思ったより大きくなったので、塩漬けさせたネ タが存在 • 今回はそれを加えたフルバージョンとして発表 • のつもりが、今回も検証しきれず タイトルに若干偽りを残す… – M@STER VERSION とは…
最先端を追及する VMware
一方 vCenter にて… vCenter のアラーム定義 - 通知方法
一方 vCenter にて… vCenter のアラーム定義 - 通知方法 • Eメールの送信 •
SNMPトラップの送信 なかなかレガシー…
今風のアラート通知といえば
Slack へ投稿する方法基礎 • Incoming Webhook App を追加 • 発行された特定 URL
に json をつけて POST する • 多少の違いはあるが、今時のチャットツールなら大 体同じ方法(curl で post)で可能 – Microsoft Teams, Chatwork etc… • この方法を使って vCenter アラートを POST 通知 する $ curl -X POST \ --data-urlencode “payload={\”text”\: \”hogehoge\”}” \ https://hooks.slack.com/services/【Token的な何か】
1. スクリプトを実行
再度アラームの定義
スクリプトを実行 • vCenter のアラームをトリガーに指定されたパスの スクリプトを実行 https://docs.vmware.com/jp/VMware-vSphere/6.7/com.vmware.vsphere.monitoring.doc/GUI D-AB74502C-5F01-478D-AF66-672AB5B8065C.html • Windows っぽい内容だが、vCSA
でも利用可能 • なので、vCSA にログインして、例えば以下のスク リプトを仕込む #!/bin/sh /usr/bin/curl -X POST \ --data-urlencode “payload={\”text”\: \"${VMWARE_ALARM_NAME}\n${VMWARE_ALARM_TARGET_NAME}\n${VMWARE _ALARM_EVENTDESCRIPTION}\n${VMWARE_ALARM_ALARMVALUE} \"}" \ https://hooks.slack.com/services/【Token的な何か】
スクリプトを実行 • 監視設定に仕込んだスクリプトのパスを指定 • この状態でアラームを発生させると Slack に POST される
スクリプトを実行 • 使えるパラメータ(環境変数)は多数あるのでメッ セージ自由度は高め https://docs.vmware.com/jp/VMware-vSphere/6.7/com.vmware.vsphere.monitoring.doc/G UID-5F5932FA-71FA-473E-8776-92B00742D566_copy.html • 分かりやすい方法ではあるが、vCSA 内部に仕込む 必要があるので少し面倒
– appliancesh のおかげで scp でのデプロイすら難あり – 一時的に bash に切り替えてデプロイ?
None
スクリプトを実行 • 使えるパラメータ(環境変数)は多数あるのでメッ セージ自由度は高め https://docs.vmware.com/jp/VMware-vSphere/6.7/com.vmware.vsphere.monitoring.doc/G UID-5F5932FA-71FA-473E-8776-92B00742D566_copy.html • 分かりやすい方法ではあるが、vCSA 内部に仕込む 必要があるので面倒
– appliancesh のおかげで scp でのデプロイすら難あり – 一時的に bash に切り替えてデプロイ?
2. snmptrapd で POST
snmptrapd の基礎 snmptrap 送信元サーバ snmp レシーバ snmptrapd traptoemail (perl script)
snmpd • snmptrapd が SNMP Trap 受信をトリガーに snmptrapd.conf で指定された処理を実行 • net-snmp-perl の traptoemail という perl スク リプトでメールを送信していることが多い
snmptrapd で POST • vCenter からは SNMP Trap を飛ばす •
SNMP レシーバ側の snmptrapd に スクリプトを仕込んで POST させる • 仕込んだスクリプト側でメッセージを json 化し、 curl で Webhook に POST $ cat /etc/snmp/snmptrapd.conf authCommunity log,execute,net public traphandle default /usr/local/bin/alert2.sh
仕込むスクリプトの実装例 $ cat /usr/local/bin/alert2.sh #!/bin/sh while read line; do text="$text$line\n"
done text=`echo $text | sed s/\"/\\\\\\\\\"/g` /usr/bin/curl -X POST \ --data-urlencode "payload={\"text\": \"$text\"}" \ https://hooks.slack.com/services/【Token 的な何か】 1. snmptrapd からの呼び出しは snmp メッセージ を標準入力で渡してくるので一手間 2. snmp メッセージがダブルクォートを含んでいる ので、多重でエスケープが必要でさらに一手間 1 2
snmptrapd での POST 実行例
snmptrapd で POST • まるっと SNMP メッセージが流れてくるのでメッ セージ自由度は低め、構成変更などは要魔改造 • snmptrapd
側に mib を仕込んで置かないとメッ セージが意味不明なので注意 (仕込んでても良く分からない?) https://kb.vmware.com/s/article/1013445 • 適当な Linux に仕込むだけなので、vCSA に比べ れば構築はやりやすい (よくある構成管理ツールでデプロイ可) • (中身は SNMP なので結局レガシー…?)
3. vCenter Event Broker Appliance (VEBA)
vCenter Event Broker Appliance • Flings で公開されている OVA アプライアンス https://flings.vmware.com/vcenter-event-broker-appliance
https://github.com/vmware-samples/vcenter-event-broker-appliance • vCenter のイベントをトリガーとしてオリジナル の Function を実行できる • PhotonOS + kubernetes + OpenFaaS をベース に OpenFaaS 用の vcenter-connector (*) をま とめたもの https://github.com/openfaas-incubator/openfaas-vcenter-connector github よりアーキテクチャ図
Function が動くまで 1. OVA をデプロイ 2. Function を実装 3. secret
情報ファイル (vcconfig.json) を設定 4. stack.yml にアプリ、ビルド、イベントを設定 5. OpenFaaS へログイン 6. secret 情報を OpenFaaS へ登録 7. function コンテナをビルド (要 docker) 8. container をコンテナレジストリにpush 9. コンテナレジストリより OpenFaaS に Deploy $ faas-cli login --username hoge --password fuga --tls-no-verify $ faas-cli secret create vcconfig --from-file=vcconfig.json --tls-no-verify $ faas-cli build -f stack.yml $ faas-cli push -f stack.yml $ faas-cli deploy -f stack.yml --tls-no-verify
Function の実装 • VEBA の github にサンプル (powercli/python) https://github.com/vmware-samples/vcenter-event-broker-appliance/tree/development/examples –
VM 変更イベントを slack に POST するサンプルとかも • イベント発生時、json が格納された文字列を引数とし て handler が呼ばれる • json の定義は下記 URL? https://github.com/openfaas-incubator/openfaas-vcenter-connector/blob/master/pk g/events/events.go • function 実装内で json を parse して対象の情報を 取得、あとはその情報を使ってやりたいことをアレコ レ実装
VEBA での POST • アラート POST できるまでの準備量はかなり多いが、 その分メッセージ自由度は高い (OVA, faas
CLI, Function, コンテナレジストリ...) • アラート POST だけで考えるとオーバースペック • Function 実装次第なので他への応用も可能 – メンテナンスモードに合わせてアラートをon/off – DRS での vMotion VM 情報をトレース • まだまだ開発中(現在 v0.2.0) これからの使い勝手向上や情報充実に期待
まとめ • vCenter のアラートを slack に通知する方法とし て以下の 3 つを –
スクリプト実行 – snmptrapd – vCenter Event Broker Appliance • VEBA はまだまだ開発中 今後に期待しつつ動向を注視 • 監視の通知方法として vCenter ネイティブで Webhook 呼び出しができるようになればなぁ… – vROps はできるみたい?
一方ロシアは • メール投稿 app を使った ※ ただし追加は有料プランのみ可
EOP