Nutanix Community Edition 5.18 徹底解説 / Nutanix CE 5.18 Deep Dive

徹底解説

はじめに • 文字や図が細かいため、やの上では読みづらい部分が多々があります。ダウンロード可能な設定としておりますので、詳細はダウンロードしてご覧ください。 • に関して、何か困ったときにはフォーラムもぜひご活用ください要ログイン
日本語フォーラムよろず相談所 • 本資料は、月日分のために作成しました。 • – 本資料は、年月時点における弊社の一般的な製品機能の概要を説明を主目的とするものです。 – 本資料は情報提供を唯一の目的とするものであり、法律的またはその他の指導や助言を意図したものではなく、いかなる契約にも用いることはできません。 – 本資料に含まれている情報については、完全性と正確性を期するよう努力しましたが、「現状」で提供され、明示的または暗示的に関わらず、いかなる保証も伴わないものとします。 – 本資料またはその他の資料の使用によって、あるいはその他の関連によって、いかなる損害か生した場合も、及びニュータニックス・ジャパン合同会社は責任を負わないものとします。 – 本資料で提供する情報やマテリアル、機能を確実に提供することを確約するものではありません。弊社製品に関して記載されている機能の開発、リリースおよび時期については、弊社の裁量により決定されます。 – 本資料で解説するは一切のサポートが提供されず、ライセンス使用許諾におきましても本番環境での利用が許可されていないことが明示されたプロダクトです。そのため、あらゆる内容のお問い合わせにつきましても回答をお約束できない点を、あらかじめご了承ください。

更新履歴 • 公開 • 更新 – フォーラムのスレッドよろず相談所に関する紹介を追記 –
更新履歴のページを追加 – 処理状況のログファイルによる確認方法を追記 – ローカルに関する説明を追記 – 「で躓きがちなポイントと回避方法」のセクションを追加 – 全体コンテンツ追加に合わせてページ番号を修正 • 更新 – 備考を追記 – 経由でのインストールについて追記 – 「をにインストールすると起動できない」のセクションを追加 – 以降コンテンツ追加に合わせてページ番号を修正旧以降 • 更新 – 「起動前にエラーで停止② と出た後に停止」のセクションを追加これに伴い「起動前にエラーで停止が認識できていない」のタイトルに番号①を追加 – 以降コンテンツ追加に合わせてページ番号を修正旧以降 • 更新 – ページタイトル変更旧：メモリでを有効化してもとなる → 新：でが有効化でもとなるメモリ接続時以外にも、他の構成の物理マシンや上での環境でも発生するため – コード修正行目、および修正行目動いてしまうけど誤： → 正：

島崎聡史しまざきさとしテクニカルエバンジェリスト
• 年として入社 ※現在も部門内 • イベント・セミナーでの登壇 • コミュニティ運営 • コンテンツ執筆・制作・管理 • ヤギ飼い

おしながきとはのセットアップのセットアップ時に躓きがちなポイントと回避方法で躓きがちなポイントと回避方法だけではないで試せるプロダクト

とは

たのしい沼にようこそ！

とはハイパーコンバージドインフラストラクチャを生み出し、進化させてきたの、をはじめとする様々なテクノロジーを、商用バージョンとほぼ同等のまま、無償で時間制限なく気の済むまで使い倒せる、俗に言う『逸般の誤家庭』向けバージョン

概要 • 利用条件 – ノンサポート – 本番環境での利用禁止 • 歴史 –
年に登場 • リリースサイクル – 現状、商用版とは非連動 • 機能 – 商用版とほぼ同じ機能セット – 商用版よりも多くので動作 – クラスターノード構成までに制限 – からに対応 → は非対応 • 備考 – 商用版とほぼ同じリソース消費

のセットアップ ※主に環境を前提に記載しているため、の場合は後半で差分をご確認ください

セットアップの流れソフトウェアの入手アカウント作成利用権の有効化コミュニティへのアクセスダウンロードハードウェアの入手要求スペックの確認ディスクレイアウト
対応ハードウェアの例インストール設定の入力の確認と同意イメージングと再起動初回起動時の自動構成クラスター作成への初回ログインインストール準備インストーラーメモリの作成起動優先度の設定

ソフトウェアの入手アカウント作成 • にアクセスし、からアカウントを作成 •フリーメールのドメインでは作成不可 •登録したメールアドレスに確認メッセージが届いたら、確認用のリンクをクリックして登録完了

ソフトウェアの入手利用権の有効化作成したアカウントでログインしたら、のをクリック表示されたページのフォームにに登録したメールアドレスを入力のボタンが
に切り替わったらクリック

ソフトウェアの入手コミュニティへのアクセス～というエラーメッセージが表示されたら、右上のボタンをクリックのセッションが残っているブラウザであれば、自動的ににログイン完了 ※もしもアカウント情報を求められたら、
のものを入力用の表示名を設定からダウンロードページに移動

ソフトウェアの入手ダウンロード • をダウンロード • ゲストを利用するならもダウンロード • リリースごとにダウンロードページが
異なるになる可能性があるため、毎回のトップページから辿ることを推奨

ハードウェアの入手要求スペックの確認公式ドキュメント時点で前バージョンから未更新コミュニティによる報告や考察備考対応コア以上以降以降
の旧世代ではフラグが足りず不可メモリ最小、以上推奨最小、以上希望妥協せず札束で叩くべきポイント製でも動作報告ありかなり幅広く対応後述インストーラーの対応範囲が狭いため注意後述 • • • 同左基本的には構成せず、生のディスクを認識させるのが吉を除き、とのは、基本的に同一コントローラーに繋ぐのが吉例：オンボード、増設、というような構成にしない）以上つ以上以上つ以上にも対応以上つ以上以上つ以上インストーラーので定義以上のドライブまたは、推奨以上のチップ搭載メモリのバージョンにより異なる詳細は後述ではインストーラー用メモリとの兼用不可後述

ハードウェアの入手ディスクレイアウトインストーラー兼起動ディスク起動ディスク兼ハイパーバイザー起動ディスク起動ディスク
兼インストーラー固定自動選択手動選択固定インストーラーを書き込んだメモリはインストール完了後も挿したままインストーラーを書き込んだメディアは初回再起動する直前に取り外す指示あり前バージョンまでディスクイメージ形式イメージ形式では前バージョンと異なり、インストーラーとハイパーバイザーには別個にメモリを用意する必要があるようになった点に注意

ハードウェアの入手対応ハードウェアの例 • の例 • 各種、または各種ベアボーン • 、速い、小さい、安い • ：
、速い、メモリ最大、安い • ならスレッド以上がオススメ処理中にがで起動するため • 中古サーバーの条件 • 前バージョンまでは非対応のため、モードを選択できないでを利用するにはかなり手間が掛かった • 【参考】ネイティブなさん • ではでもインストールできるようになったため、世代的に問題がなければかなり多くので動作すると考えられる • メモリの入手性やディスク搭載スロットトレーの付属状況等を必ず事前に確認 • 騒音や大きさ等を覚悟した上で購入すること • • などの上でネステッドにすることも可能ドライバのビルドが必要後述 • ハイパーバイザー用メモリ • 書込み性能が低いとインストール時にタイムアウトしてしまう可能性があるためフラッシュ搭載のものがオススメ • 個人的には小ささ重視かつそこそこ安価なトランセンドシリーズを愛用 • ：で動作することを当方確認済み • ：メモリ非推奨詳細は後述 • 備考 • 以降ではアーキテクチャ変更により等の非エンタープライズ向けへの対応がかなり厳しくなっている点に注意ドライバーの自前でのビルドも出来ない画像は上記トランセンドサイトより

インストール準備インストーラーメモリの作成 • ブータブルメモリを作成するのがオススメ • のインストーラーの配布形式はイメージだが、今どき
に焼くのは面倒・光学ドライブ非搭載マシンが多い・読込みが遅いという三重苦 • ユーザーならルーファスというフリーウェアがオススメ • は詳しくないのでお手数ですがググってください • からリモートをマウントできるサーバーを利用している場合はもちろんそれでも

インストール準備起動優先度の設定 • に入り、起動デバイスの優先順位を変更し、インストーラーメモリが最上位となるように設定する • キーや
キー等機種によって異なるで入れるブートデバイス手動選択画面から起動すると、なぜかスクリーンサイズ不足になってしまい、インストールを続行できない（報告多数） •この方法で起動してもスクリーンサイズが大きくならない場合には、経由でインストールすることで回避するという手もある •systemctl start sshd でを起動し、クライアントから接続 •./ce_installer && screen -r でインストーラー起動のリトライが可能

スクリーンサイズ不足のエラー表示

インストーラーの処理プロセス概要による設定情報の入力ハイパーバイザー選択インストールメディアのアドレスディスク選択ハイパーバイザー、、データアドレス・サブネットマスク・ゲートウェイ設定
ハイパーバイザー、シングルノードクラスターを作成するか指定イメージングハイパーバイザーのイメージングのイメージングインストールメディアの抜去＆ノード再起動初期構成ハイパーバイザー初期設定初期設定再起動シングルノードクラスター作成「」の項目は自動で実施されるためユーザーは意識しない

インストール設定の入力ハイパーバイザー選択ディスク選択アドレスサブネットマスクゲートウェイ設定シングルノードクラスターを自動作成するか？
インストーラーの起動に成功すると、が起動する

インストールの確認と同意の確認最後までスクロールする必要ありへの同意

インストールイメージングと再起動 • の最後にあるを選択するとが終了し、に切り替わり、ハイパーバイザーとのイメージングが行われる
• 所要時間～分程度の性能に依存 • イメージングが完了すると、インストールメディアの取り外しと再起動を促すメッセージが表示される • を入力してで再起動が行われる

インストール初回起動時の自動構成 • 再起動が完了すると、コンソールにはのログインプロンプトが表示される •バックグラウンドで初回起動時に自動構成が行われるネットワーク設定起動パーティション拡張内部仮想スイッチ作成作成
初回起動時処理の実行の再起動 • 順次サービスが開始され、アクセスが可能となる • 上での ssh [email protected] で、内部仮想スイッチを経由してにアクセス可能 •アカウント • ユーザー名パスワード • ユーザー名パスワード • が起動しているかどうかは virsh list --all で確認可能

インストールクラスター作成 • 「シングルノードクラスターを自動作成するか？」にチェックを入れた場合、このページの手順は不要 •ただし再起動完了後、想像以上に長い時間を要するので、焦らず待つこと分程度 •genesis status を間隔をあけて複数回実行してみて、プロセスが表示されるサービスが徐々に増えていれば、
クラスター作成が正常に進行していると考えられる • クラスター作成前の確認 •前ページの初回起動時の自動構成が完了している必要あり ✓genesis statusでとのプロセスが表示されるか？ ✓cluster statusで “Cluster is currently unconfigured. Please create the cluster”というメッセージが返されるか？ • クラスター作成用コマンド •シングルノードクラスターの作成 •cluster –s <CVM_IP> --redundancy_factor=1 create •マルチノードクラスターの作成 •cluster –s <CVM_IP_1>,<CVM_IP_2>,<CVM_IP_N> create ※ はノード分オプション付け忘れ注意！忘れるとシングルノードにもかかわらずになり、書込みが正常に行われなくなる

【補足】クラスター作成完了 • 各サービスが“UP”になりプロセスが表示される • 最後に“Success!”と表示される

インストールへの初回ログイン • ブラウザでにアクセス •証明書のエラーは無視する • 初期アカウントでログインすると、パスワード更新を求められる •ユーザー名初期パスワード
•パスワード要件が細かい点に注意右記 • パスワードを更新した後、アカウントによるアクティベートが求められる •この時だけは必ずインターネット接続できる必要あり •アクティベート完了後はインターネット接続なしでも動作可能 •現バージョンではの設定が自動で入るはずだが、上手くいっていない場合にはのコマンドで追加 •例 ncli cluster add-to-name-servers servers=8.8.8.8 • 文字以上 • つ以上の小文字を含む • つ以上の大文字を含む • つ以上の数字を含む • つ以上の特殊文字記号を含む • 前回のパスワードと文字以上異なる • 直近世代のパスワードと同一でない • 同じ文字が文字以上続かない • 大文字、小文字、数字、特殊文字記号の種類をいずれも含む • 単純な単語やシステム内の辞書に登録されている単語に一致しない

のセットアップ時に躓きがちなポイントと回避方法 • 起動前にエラーで停止① が認識できていない • 起動前にエラーで停止② と出た後に停止 • インストールが中断される①
を取得できない • インストールが中断される② ハイパーバイザーのイメージングがタイムアウト • メモリのマシンにインストールできない • をにインストールすると起動できない • シングルノードクラスターが自動作成されない • アップロードしたイメージファイルがのまま

起動前にエラーで停止① が認識できていないエラー表示こちらは無視でシャーシのが云々の生成にアドレスが必要エラーが発生するとコンソールに抜ける
※ でも抜けられます

• 発生原因 • インストーラーのデバイスドライバが商用版と同等 • はのみ • の
など、ユーザーに多く利用されるデバイスを認識できない可能性あり • を認識できないと、の生成に必要なアドレスを取得できず、中断される • 解決の方向性 • 版のには幅広いドライバが同梱されているため、とにかくインストーラーにを認識させればどうにかなる • はベースだがカーネルは何故か版である独自ビルドではないのため、ソースが入手可能 • も版デバイスドライバのソースを配布している起動前にエラーで停止① が認識できていない発生原因と解決の方向性自分でドライバをビルドすれば！！ちなみに私ののも製

起動前にエラーで停止① が認識できていないドライバビルド環境の準備 • 上でを起動 •仮想マシン作成時の設定 •タイプ •メモリ最低でも
程度オンメモリで作業するため •仮想ハードディスク追加しない •仮想マシン作成後の設定 • 最小でも程度に変更ビルド処理を行うため •その他 •ネットワークはでもブリッジでも構わないが、インターネットに接続可能な状態にすること • • を有効化してクライアント経由で操作すると作業しやすい • と外部とのファイルの受け渡しには、個人的にはメモリが便利だと思います

起動前にエラーで停止① が認識できていないドライバのビルドに使用するファイル • カーネルソース • 等からダウンロード • ドライバのソース •利用する
に応じてダウンロード • の製の場合 • →

起動前にエラーで停止① が認識できていないドライバビルド手順のビルド # mount /dev/sdb1 /mnt/usb # cp
/mnt/usb/linux-4.19.100.tar.gz /usr/src/kernels/ # cd /usr/src/kernels/ # tar xvfz linux-4.19.100.tar.gz # yum install -y bison flex bc elfutils-libelf-devel openssl-devel # cd /usr/src/kernels/linux-4.19.100 # cp /proc/config.gz . # gunzip config.gz # mv config .config # make ※ メモリでデータを渡す手段に応じて適宜配下に展開ビルドに必要なパッケージをインストール稼働中のカーネルの設定をコピーして展開カーネルビルド時の設定ファイルとして利用カーネルビルドを実行

起動前にエラーで停止① が認識できていないドライバビルド手順ドライバビルド準備 # cd /usr/lib/modules/4.19.100/ # rm -f
build source # ln -s /usr/src/kernels/linux-4.19.100 build # ln -s /usr/src/kernels/linux-4.19.100 source の痕跡を削除ビルド済みのディレクトリへシンボリックリンクソースのディレクトリへシンボリックリンクドライバのビルドに必要なファイルの置き場所開発者の痕跡が。

起動前にエラーで停止① が認識できていないドライバビルド手順ドライバのビルドと保存 # cp /mnt/usb/r8168-8.048.03.tar.bz2 /var/tmp # cd
/var/tmp # tar xvf r8168-8.048.03.tar.bz2 # cd r8168-8.048.03 #./autorun.sh # find / -name r8168.ko /var/tmp/r8168-8.048.03/src/r8168.ko # cp /var/tmp/r8168-8.048.03/src/r8168.ko /mnt/usb # umount /mnt/usb ※ メモリでデータを渡す手段に応じて適宜展開先はどこでもだとスクリプトが用意されているビルドされたドライバ（カーネルモジュール）のパスを確認後ほど利用するためメモリに保存ビルド済みのドライバカーネルモジュールを置いておきます。製の他モデルにも流用可能なはず。ここからダウンロード可能

起動前にエラーで停止① が認識できていないドライバのインストールとの起動 # mount /dev/sdd1 /mnt/usb # insmod
/mnt/usb/r8168.ko # ip a # umount /mnt/usb # ./ce_installer && screen -r ※ メモリがの場合環境に応じて変更ドライバのインストール回限りの利用なのでこれでが表示されることを確認メモリをアンマウント（忘れるとの起動に失敗）を起動インストーラーを起動前回同様にインストーラーが中断されることを確認ドライバを保存したメモリを挿入 ※ の起動前に外さないとエラーの原因となるので注意）ドライバのインストールとの起動

【余談】ドライバのビルドが出来なかった • 年くらい前の激安鯖のオンボードはに含まれるが自動でロードされるものの、正常に動作しませんでした – 各種
ディストリビューション等のでも当該のの認識に関するの報告が多数あり – ドライバのソースからのビルドを試みましたが、ではヘッダーファイル不足でビルドできませんでした。そもそもドライバのソースがまでしか対応してない？ • なお、を増設してインストール完了まではこぎつけましたが、が年前ののため、が起動出来ずに結局詰みました

起動前にエラーで停止② と出た後に停止事象・原因・回避策 • 事象 • を起動する前のフェーズで INFO Mounting Hyper-V
FAT32 partition" というメッセージのあと、エラーメッセージが表示され、となる • 原因 • がディスク内のインストール済みハイパーバイザーをチェックでは本来不要な処理を行い、誤って用のロジックに進んでしまっていると思われるなおは非対応 •ディスクを他用途から流用した場合や、余計なディスクを搭載している場合に発生する場合がある • 対応 •他用途から流用したディスクのパーティションをコマンド等で削除する • のインストール先として使用しないディスクは取り外す •上記の対応を行った後に、の起動をリトライする

インストールが中断される① を取得できない事象・原因・回避策の概要 • 事象 •インストール開始後に右のメッセージと共にすぐに中断 • 原因 •ノードシリアルを生成する処理は
つの方法がある •ハードウェア情報を取得して、それを元に生成する •ハードウェア情報を取得できない場合、関数で生成する •前者の処理で中途半端にハードウェア情報が取得されると、値が空になってしまい、且つ関数での生成に移行しない？（推測） • 回避策の概要 •インストーラーの裏側で動いているスクリプトを編集し、を強制的に関数で生成させる出典: Hanabiさんのツイートより https://twitter.com/Hanabi36610/status/1340974198705934336?s=20

これをこう ※ 行目をコメントアウト編集したら ./ce_installer && screen –r
でを起動インストールが中断される① を取得できないでコンソールに抜けてを編集

インストールが中断される② ハイパーバイザーのイメージングがタイムアウト事象・原因・回避策 • 事象 •ハイパーバイザーのイメージングがタイムアウトする • 原因 •ハイパーバイザー用メモリの書込み性能が不足している
• 回避策 •タイムアウト値を延長する • でコンソールに抜けてを編集 • 備考 • インターフェースが高速でもメモリ内のチップが遅いと意味がない •正直なところ、書込みの性能の高速なメモリを買ってしまったほうが良い 31 HYP_INSTALL_TIMEOUT = dict( 32 esx=7 * 2 * 60, 33 hyperv=15 * 2 * 60, 34 kvm=20 * 2 * 60, 35 xen=10 * 2 * 60) 36 HYP_INSTALL_TIMEOUT_MAX = 30 * 60

メモリのマシンにインストールできない事象・原因・回避策の概要 • 事象 •前バージョンまではメモリのマシンにインストールできたが、ではインストール中にエラーで停止してしまう
• 原因 • によってメモリが消費され、イメージング処理を担うを起動するためのメモリが確保できない • 回避策の概要 •インストーラーメモリ上にスワップファイルを作成 • 備考 •この方法でインストール成功しても、ゲスト用のメモリが程度しかないので、オススメはしない

メモリのマシンにインストールできない回避策の詳細のカーネルは機能が無効のため、を有効化したカーネルをビルド •カーネルのビルドの流れはこの資料のページからを参照 • の直前に
ファイルを編集する右記 • するとを有効化したことで関連項目の設定について聞かれるが、すべて何も入力せずでよいビルドしたカーネルをインストーラーメモリのディレクトリと同じディレクトリにコピー 38 #CONFIG_SWAP is not set ↓ 38 CONFIG_SWAP=y

メモリのマシンにインストールできない回避策の詳細インストーラーメモリをインストール先マシンに挿入し、電源を入れる •デバイスの起動順位はインストーラーメモリが最上位となるように設定の起動前に一瞬表示されるメニューに入り、
が有効なカーネルで起動する ① 画面の後からのブートに行く直前までに、スペースキーなどを連打するとブートローダーのメニューで止まると表示される ② キーでブートパラメータ編集画面に入る ③ をに書き換えるスクショはの場合 ④ で起動インストーラーが起動したら、でコンソールに抜ける

メモリのマシンにインストールできない回避策の詳細インストーラーメモリ上にファイルを作成する •インストーラーメモリはにマウントされている •
フォーマットのためファイルサイズ上限は約 • をにするとのファイルサイズ上限に当たりと言われる •特に問題は無いが気分の問題で、右の例ではで止めているを有効化する •swapon /mnt/iso/swapfile インストーラーを起動 •./ce_installer && screen -r イメージングが完了したら、再起動する前にスワップを無効化 •swapoff /mnt/iso/swapfile ※結構時間が掛かる再起動 •reboot

をにインストールすると起動できない事象・原因 • 事象 • をにインストールすると、イメージングは成功するが起動できない • 原因
• のブートプロセスでカーネルモジュールがロードされていないためで始まるデバイスがない起動デバイスが存在しないために切り替わる

をにインストールすると起動できない回避策 • とりあえず起動処理を先に進める方法こちらだけだと起動のたびに毎回必要 → でモジュールをロードする •
再起動後も有効な設定 →ブートプロセスの初期段階でモジュールが自動的にロードされるように設定するにログインし、下記のとおりブートローダーの設定ファイルに追記に反映 • のマシン • のマシン dracut:/# modprobe nvme dracut:/# exit # vi /etc/default/grub から抜けて起動プロセス再開 6 GRUB_CMDLINE_LINUX=“crashkernel=32G-96G:128M,96G-:256M nomodeset biosdevname=0 rhgb quiet intel_iommu=on iommu=pt elevator=noop fips=1 audit=1 l1tf=flush,nowarn rdloaddriver=nvme" # grub2-mkconfig -o /boot/efi/EFI/centos/grub.cfg # grub2-mkconfig -o /boot/grub2/grub.cfg

シングルノードクラスターが自動作成されない実は待ち時間が足りてないだけのケースが多い • イメージングおよび再起動の完了後、クラスター作成を開始する前に、まず以下の処理が実施される • シングルノードクラスターを作成するよう指定した場合、上記の処理の後にクラスター作成が開始されるため、性能次第では分以上待つ場合も
•処理状況の確認方法 • 上でを表示するのがオススメ ✓クラスター作成成功のメッセージ： ✓クラスター作成失敗のメッセージ： • 内での更に詳細な処理状況は、上で • でコマンドを叩いてしばらく眺めてみて、使用率の高いプロセスが立ち上がってくるようであれば、まだ何らかの処理中の可能性が高い主にや再起動初期設定ハイパーバイザー初期設定

アップロードしたイメージファイルがのまま搭載しているディスクがの要件を満たしておらず、かつシングルノードクラスターを手動作成した際にオプションを付けなかった場合に発生 • 事象 •クラスター作成が完了し、にも入れてしまうため気づきにくい
• のイメージサービスでアップロードしたイメージ等が、なままで使用できない • などのパフォーマンス情報のグラフが表示されない • 原因 •搭載しているディスクがの要件を満たしておらず、かつシングルノードクラスターを手動作成した際にオプションを付けなかった • が構成可能な条件：同一容量・同一モデルのディスクが複数搭載された状態 • 構成例：同一容量・同一モデルの、同一容量・同一モデルの同一容量・同一モデルのなど • 構成例：という構成 • とで同一容量の場合や、本以上の奇数で構成した場合にどうなるかは未検証 • 対応方法 •正しくオプションを付けてクラスターを作成しなおす • コマンドでクラスターを停止 → コマンドでクラスターを削除とは：単一ノード内でデータを重化する構成。本来のクラスター構成とは異なるが、ディスク障害に対するデータ保護が可能。商用版では、という小規模バックアップ用構成や、環境でのノードクラスターなど、小規模環境用で限定的に利用されている仕組み。では公式にはサポートされていないため利用を推奨しない。

で躓きがちなポイントと回避方法 • ハードウェア要件 • インストールメディアの読み込み方法 • メモリのハイパーバイザー起動ディスクとしての使用 • シングルノードクラスター自動作成時の

はじめに主な注意点 • ハイパーバイザー起動ディスクのハードウェア要件が異なる •ハイパーバイザー起動ディスクにはメモリを使用しないなどを使用するのが無難 • は
の構成ファイルを置くためにが必要 •しかし、社さんのスタンスとして、メモリへのの作成は非推奨のため、普通にインストールするとが有効化されず、の構成ファイルの置き場所がないため作成に失敗するメモリの耐久性を鑑みると妥当な方向性だが、は構成ファイルしか置かず、実データはに置くため問題ない •この問題を回避するため、インストール時にひと手間加える必要がある後述 • メモリを使用、且つ以前の場合、上記に加えてスクリプト内の処理に問題があり、にストレージがアタッチされない事象が起きるため、更にひと手間必要後述 •ハイパーバイザー起動ディスク容量の要件がよりも高い • ではでも問題ないため、の経験者がハマりがち • では約以上のディスクが必要。ではのディスクでもであることを確認済 ※それ未満の容量は当方未検証 • インストールメディアの読み込み方法が異なる •ネットワーク経由で読み込む必要がある • コマンドでダウンロード可能なパスであることイメージングに成功しても、の作成や初期構成に問題があると、のホスト名がとなる

のハイパーバイザー起動ディスクにメモリを使用するの有効化 • 概要 •「はじめに」で理由を述べたとおり、デフォルトではが無効となるため、のハイパーバイザー起動ディスクにメモリを使用することはできないが、をはじめとするディスクの搭載本数が少ないマシンでは
メモリブートの需要がある • 対応方法 •イメージング完了後、再起動を行う前に、の起動領域に埋め込まれている初回起動時に行われる処理の設定ファイルを書き換えてから、再起動する • 詳細 [root@phoenix ~]# mount /dev/sdd5 /mnt/bootbank/ [root@phoenix ~]# vi /mnt/bootbank/Nutanix/firstboot/first_boot_config.json 247 "use_vmfs_datastore": false, ↓ 247 "use_vmfs_datastore": true, [root@phoenix ~]# umount /mnt/bootbank [root@phoenix ~]# reboot の番パーティションをマウントというファイルのというパラメータをからに変更して保存をアンマウントして再起動

のハイパーバイザー起動ディスクにメモリを使用する例；インストール成功時のパーティション構成（メモリ） • の作成は内のスクリプトにより実行される •
ディスクのスペースを自動で計算し、不足の場合には作成されず、インストール失敗となる • ではこの方法でを有効化するのに加えて、もうつ対応が必要次項から解説

でが有効でもとなる発生する事象 • 概要 • が有効化であるにもかかわらずとなる •
詳細 •データストアブラウザで中身を確認するとの構成ファイルは存在しているが、仮想マシンのインベントリにはが存在しない •データストアにあるファイルを使ってインベントリに登録してみると、という仮想マシン名になっており本来ならばにアタッチされるはずのやがアタッチされていない ※商用版はパススルーでをアタッチするが、ではを使用 • 備考 • で事象を確認したが、それ以前のバージョンでも発生する可能性ありはパーティションレイアウトが異なるため発生しない

でが有効でもとなるログの確認 • 等でのにアクセスして確認ユーザー名、パスワード
• というスクリプトの行目、関数内のというコードの実行時に発生 • という配列から、存在しない値を削除しようとしたことでとなっている • → という変数の末尾文字を削除した値 FATAL Fatal exception encountered: Traceback (most recent call last): File "/bootbank/Nutanix/firstboot/esx_first_boot.py", line 2516, in <module> main() File "/bootbank/Nutanix/firstboot/esx_first_boot.py", line 2361, in main create_svm_vmx_and_attach_rdm_disks_ce() File "/bootbank/Nutanix/firstboot/esx_first_boot.py", line 1478, in create_svm_vmx_and_attach_rdm_disks_ce dev_paths = get_disk_locations_ce() File "/bootbank/Nutanix/firstboot/esx_first_boot.py", line 1019, in get_disk_locations_ce device_identifiers.remove(disk[:-3]) ValueError: list.remove(x): x not in list エラー発生個所エラーの内容

でが有効でもとなる当該部分のコードを確認してみる /bootbank/Nutanix/firstboot/esx_first_boot.pyの1019行目付近 def get_disk_locations_ce(): disk_dict = {}
device_identifiers = [] location = 1 out = run_cmd(["ls /vmfs/devices/disks"]) for disk in out.splitlines(): if (disk.startswith("vml")): continue if (":" not in disk): for serial in P_LIST.ce_serials: if serial in disk: device_identifiers.append(disk) disk_dict[disk] = location location += 1 for wwn in P_LIST.ce_wwns: if wwn in disk: device_identifiers.append(disk) disk_dict[disk] = location location += 1 # We remove esxi host disk from disk available to CVM elif disk[-3:] == ":10": print(disk[:-3]) device_identifiers.remove(disk[:-3]) disk_dict.pop(disk[:-3]) location -= 1 [root@Failed-Install:~] ls /vmfs/devices/disks/ mpx.vmhba32:C0:T0:L0 mpx.vmhba32:C0:T0:L0:1 mpx.vmhba32:C0:T0:L0:10 mpx.vmhba32:C0:T0:L0:2 mpx.vmhba32:C0:T0:L0:5 mpx.vmhba32:C0:T0:L0:6 mpx.vmhba32:C0:T0:L0:7 mpx.vmhba32:C0:T0:L0:8 mpx.vmhba32:C0:T0:L0:9 t10.ATA_____Crucial_CT525MX300SSD4__________________________163413C75247 t10.ATA_____Crucial_CT525MX300SSD4__________________________163413C75247:1 t10.ATA_____Crucial_CT525MX300SSD4__________________________163413C75247:2 t10.ATA_____Crucial_CT525MX300SSD4__________________________163413C75247:3 t10.ATA_____Crucial_CT525MX300SSD4__________________________163413C75247:4 t10.ATA_____Crucial_CT525MX300SSD4__________________________163413C75345 t10.ATA_____Crucial_CT525MX300SSD4__________________________163413C75345:1 vml.01000000002020202020202020313633343133433735323437437275636961 vml.01000000002020202020202020313633343133433735323437437275636961:1 vml.01000000002020202020202020313633343133433735323437437275636961:2 vml.01000000002020202020202020313633343133433735323437437275636961:3 vml.01000000002020202020202020313633343133433735323437437275636961:4 vml.01000000002020202020202020313633343133433735333435437275636961 vml.01000000002020202020202020313633343133433735333435437275636961:1 vml.0100000000303754304c4f374d45363834414134374d6173732053 vml.0100000000303754304c4f374d45363834414134374d6173732053:1 vml.0100000000303754304c4f374d45363834414134374d6173732053:10 vml.0100000000303754304c4f374d45363834414134374d6173732053:2 vml.0100000000303754304c4f374d45363834414134374d6173732053:5 vml.0100000000303754304c4f374d45363834414134374d6173732053:6 vml.0100000000303754304c4f374d45363834414134374d6173732053:7 vml.0100000000303754304c4f374d45363834414134374d6173732053:8 vml.0100000000303754304c4f374d45363834414134374d6173732053:9 ざっくり解説 • シリアルまたはを含む物理ディスク名をリストアップし、その中で番パーティションが作成されているディスクであれば、のブートデバイスであると判定して、にでアタッチする対象のリスト削除する、というロジック • メモリは名前にシリアルもも含まない識別子が使用されるため、リストに追加されない • にもかかわらず、起動ディスクには番パーティションが作成されているため、リストから削除する処理が行われ、となる • 同様の事象がの環境や、一部の物理マシンでも発生するという報告あり

でが有効でもとなる回避方法コード修正の行目付近 for wwn in
P_LIST.ce_wwns: if wwn in disk: device_identifiers.append(disk) disk_dict[disk] = location location += 1 # We remove esxi host disk from disk available to CVM elif disk[-3:] == ":10": print(disk[:-3]) device_identifiers.remove(disk[:-3]) disk_dict.pop(disk[:-3]) location -= 1 for wwn in P_LIST.ce_wwns: if (wwn != None and wwn in disk) and (disk not in device_identifiers): # if wwn in disk: device_identifiers.append(disk) disk_dict[disk] = location location += 1 # We remove esxi host disk from disk available to CVM elif disk[-3:] == ":10": print(disk[:-3]) if disk[:-3] in device_identifiers: device_identifiers.remove(disk[:-3]) disk_dict.pop(disk[:-3]) location -= 1 削除しようとしているデータが配列内に存在しているかを確認追加した文の条件が真のときだけ処理されるようにインデント修正が空の場合に発生するエラーを回避の場合など

メモリでを有効化してもとなる処理のみを再実行する方法 • インストールを最初からやり直して、の修正と同じタイミングでも併せて修正する、という方法を推奨 • イメージングの時間を節約したい場合には、以下の方法で
処理のみの再実行で対応できる場合もあるの試行を何度も繰り返すなどして環境がな状態になっている場合には上手く動作しない可能性があるので過度な期待は禁物等でのにアクセスユーザー名、パスワードを削除スクリプトを再実行成功すると初期構成が開始されるので、完了するまで待つ完了したらにコンソールかでアクセスし、クラスターの作成に進む [root@Failed-Install:~] python /bootbank/Nutanix/firstboot/esx_first_boot.py [root@Failed-Install:~] rm /bootbank/Nutanix/firstboot/.firstboot_fail

シングルノードクラスター自動作成時にになってしまうではインストーラーに問題があり、シングルノードクラスターを自動作成した際に、では本来サポートされないになってしまうため注意が必要 • の場合 •シングルノードクラスターを自動作成する際にならば
を作成するためのフラグファイルを作成する • フラグファイルを発見したら変数にを代入し、クラスターを作成 • の場合 • かどうかを判定せずにでクラスターを作成してしまっている • で解説した問題を引き起こす可能性あり •よってではシングルノードクラスター利用時、自動作成ではなく、コマンドによる手動作成を推奨

だけではないで試せるプロダクト

パブリッククラウドプライベートクラウドインフラの近代化セキュリティの強化データプラットフォームの統合運用の自動化と自律化業務継続性の確保ハイブリッドクラウドをシームレスに運用ソリューションの多くはでも利用可能

で利用可能なソリューション機能の概要管理標準の構成要素。分散ストレージをはじめとする様々な機能を提供。標準の構成要素。管理インターフェイスを提供。製ハイパーバイザー。ストレージ機能。ファイルサーバー機能。
自動化、機械学習を利用した分析、レポーティングなど運用改善のための各種機能を提供。用のマイクロセグメンテーションをはじめとするネットワークセキュリティ機能を提供。クラスターの展開および管理機能。マルチクラウド対応オートメーション機能。オブジェクトストレージ機能。という仮想アプライアンスが必要 • • • ＋各ソリューションが実際に使用するリソースを別途消費 ↓ メモリが大量に必要！

で利用可能な範囲 • – 全ての機能が利用可能 – 相当 • – 元々エディションに関係なくすべての機能が利用可能 •
【祝】で復活！ – の初期以来、久しぶりの復活！！ ▪ 過去数バージョンに渡り、のからののダウンロードができなくなっていた ▪ 過去のバージョンでは、商用版ユーザーやパートナーはから商用版のをダウンロードし、ファイルを用に書き換えてアップロードすれば動作した（→ のユーザーはでのダウンロード不可）

<ncli> license get-license Category : Community Sub Category : Cluster
Expiry Date : No Expiry Use non-compliant feat... : true Model : CommunityEdition Category : Community License Class : appliance Node Expiry Date : No Expiry Num days remaining : Perpetual Used : true 専用のライセンスが自動的に適用されている

<ncli> license get-allowances Feature : dr_multiple_remote_sites Feature Display Name :
Data Protection Multiple Remote Sites Allowance Type : BOOLEAN Allowance : true Feature : pulse Feature Display Name : Pulse Allowance Type : BOOLEAN Allowance : true Feature : lock_down Feature Display Name : Cluster Lockdown Allowance Type : BOOLEAN Allowance : true Feature : vdisk_pinning_enabled Feature Display Name : Vdisk Pinning Allowance Type : BOOLEAN Allowance : true Feature : self_service_portal Feature Display Name : Self Service Portal Allowance Type : BOOLEAN Allowance : true Feature : software_encryption_enabled Feature Display Name : Software Data at Rest Encryption Allowance Type : BOOLEAN Allowance : true Feature : perf_tier_inline_dedup Feature Display Name : Inline Performance Deduplication Allowance Type : BOOLEAN Allowance : true Feature : snmp Feature Display Name : SNMP Allowance Type : BOOLEAN Allowance : true Feature : abs_internal Feature Display Name : Nutanix Volumes (Internal) Allowance Type : BOOLEAN Allowance : true Feature : cloud_connect Feature Display Name : Cloud Connect Allowance Type : BOOLEAN Allowance : true Feature : abs_external Feature Display Name : Nutanix Volumes (External) Allowance Type : BOOLEAN Allowance : true Feature : file_server Feature Display Name : Acropolis File Services Allowance Type : BOOLEAN Allowance : true Feature : max_replication_factor Feature Display Name : Maximum Redundancy Factor Allowance Type : INTEGER_LIST Allowance : 3 Feature : offline_disk_dedup Feature Display Name : Capacity Disk Dedup Allowance Type : BOOLEAN Allowance : true Feature : self_encrypting_drives_password_enabled Feature Display Name : Self Encrypting Drives Password Allowance Type : BOOLEAN Allowance : true Feature : dr_compression Feature Display Name : Remote Site Compression Allowance Type : BOOLEAN Allowance : true Feature : erasure_code Feature Display Name : Erasure Coding Allowance Type : BOOLEAN Allowance : true Feature : inline_compression Feature Display Name : Inline Compression Allowance Type : BOOLEAN Allowance : true Feature : offline_compression Feature Display Name : Post-process Compression Allowance Type : BOOLEAN Allowance : true Feature : near_sync_enabled Feature Display Name : Near Sync Allowance Type : BOOLEAN Allowance : true Feature : time_stream Feature Display Name : Time Stream Allowance Type : BOOLEAN Allowance : true Feature : dr_application_consistent_snapshot Feature Display Name : Application Consistent Snapshot Allowance Type : BOOLEAN Allowance : true Feature : mixed_node_cluster Feature Display Name : Heterogeneous Clusters Allowance Type : BOOLEAN Allowance : true Feature : rest_api Feature Display Name : REST API Allowance Type : BOOLEAN Allowance : true Feature : prism_central Feature Display Name : Prism Central Allowance Type : BOOLEAN Allowance : true Feature : common_access_card Feature Display Name : Common Access Card (CAC) Allowance Type : BOOLEAN Allowance : true Feature : metro_availability Feature Display Name : Metro Availability Allowance Type : BOOLEAN Allowance : true Feature : max_nodes Feature Display Name : Maximum Node Limit (within cluster) Allowance Type : INTEGER_LIST Allowance : 1024 Feature : file_level_restore Feature Display Name : File Level Restore Allowance Type : BOOLEAN Allowance : true すべてに相当！

で利用可能な範囲 • 専用バージョンのが提供されている – – 商用版との混在は不可 • に組み込まれているプロダクトはいずれも利用可能 –
▪ は相当 ▪ は期限付きトライアルと表示が出るが期限修了後もした後も利用可能な模様

<ncli> license get-license Category : ULTIMATE Sub Category : Cluster
Expiry Date : Tue Mar 16 12:26:56 PDT 2021 Use non-compliant feat... : true Category : Ultimate_Trial Sub Category : License Class : prism_central Node Expiry Date : Tue Mar 16 12:26:56 PDT 2021 Num days remaining : 89 Used : true <ncli> 日という表示

<ncli> license get-allowances Feature : max_trial_period_days Feature Display Name :
Trial period duration in days Allowance Type : INTEGER_LIST Allowance : 90 Feature : custom_dashboard Feature Display Name : Customizable Dashboard Allowance Type : BOOLEAN Allowance : true Feature : capacity_forecast Feature Display Name : Capacity Forecast Allowance Type : BOOLEAN Allowance : true Feature : analysis_session Feature Display Name : Scenario Focused Troubleshooting Allowance Type : BOOLEAN Allowance : true Feature : monitoring_troubleshooting Feature Display Name : Monitoring and Troubleshooting Allowance Type : BOOLEAN Allowance : true Feature : sql_server_monitoring Feature Display Name : SQL Server Monitoring Content Pack Allowance Type : BOOLEAN Allowance : true Feature : one_click_upgrades_lcm Feature Display Name : 1-click Upgrades via LCM Allowance Type : BOOLEAN Allowance : true Feature : xpilot Feature Display Name : xpilot Allowance Type : BOOLEAN Allowance : true Feature : pc_reporting Feature Display Name : Reporting Allowance Type : BOOLEAN Allowance : true Feature : vulcan Feature Display Name : Low-code/No-code Operations Automation Allowance Type : BOOLEAN Allowance : true のすべての機能が有効 Feature : budgeting_chargeback Feature Display Name : Budgeting and chargeback Allowance Type : BOOLEAN Allowance : true Feature : cost_metering Feature Display Name : Cost metering for resources Allowance Type : BOOLEAN Allowance : true Feature : infrastructure_mgmt Feature Display Name : Infrastructure Management Allowance Type : BOOLEAN Allowance : true Feature : vcenter_monitoring Feature Display Name : vcenter_monitoring Allowance Type : BOOLEAN Allowance : true Feature : vm_inefficiency_detection Feature Display Name : VM inefficiency detection and right sizing Allowance Type : BOOLEAN Allowance : true Feature : what_if_analysis Feature Display Name : Just-In-Time Planning Allowance Type : BOOLEAN Allowance : true Feature : search Feature Display Name : Comprehensive Search Allowance Type : BOOLEAN Allowance : true Feature : app_monitoring Feature Display Name : Application Monitoring Allowance Type : BOOLEAN Allowance : true Feature : xdiscover Feature Display Name : Application Discovery Allowance Type : BOOLEAN Allowance : true Feature : smart_alerts Feature Display Name : smart_alerts Allowance Type : BOOLEAN Allowance : true Feature : virtual_infra_monitoring Feature Display Name : Virtual Infrastructure(including non-AOS) monitoring Allowance Type : BOOLEAN Allowance : true Feature : anomaly_detection Feature Display Name : Anomaly Detection Allowance Type : BOOLEAN Allowance : true Feature : rich_alert_notification Feature Display Name : Rich Alert Notification Allowance Type : BOOLEAN Allowance : true <ncli>

日トライアルという表示

<ncli> license get-license Category : Starter Sub Category : Cluster
Expiry Date : No Expiry Use non-compliant feat... : true Category : Starter Sub Category : License Class : prism_central Node Expiry Date : No Expiry Num days remaining : Perpetual Used : true <ncli> license get-allowances Feature : monitoring_troubleshooting Feature Display Name : Monitoring and Troubleshooting Allowance Type : BOOLEAN Allowance : true Feature : custom_dashboard Feature Display Name : Customizable Dashboard Allowance Type : BOOLEAN Allowance : false Feature : xdiscover Feature Display Name : Application Discovery Allowance Type : BOOLEAN Allowance : false Feature : vcenter_monitoring Feature Display Name : vcenter_monitoring Allowance Type : BOOLEAN Allowance : false Feature : smart_alerts Feature Display Name : smart_alerts Allowance Type : BOOLEAN Allowance : false Feature : vm_inefficiency_detection Feature Display Name : VM inefficiency detection and right sizing Allowance Type : BOOLEAN Allowance : false Feature : budgeting_chargeback Feature Display Name : Budgeting and chargeback Allowance Type : BOOLEAN Allowance : false Feature : xpilot Feature Display Name : xpilot Allowance Type : BOOLEAN Allowance : false Feature : vulcan Feature Display Name : Low-code/No-code Operations Automation Allowance Type : BOOLEAN Allowance : false Feature : infrastructure_mgmt Feature Display Name : Infrastructure Management Allowance Type : BOOLEAN Allowance : true Feature : capacity_forecast Feature Display Name : Capacity Forecast Allowance Type : BOOLEAN Allowance : false Feature : max_trial_period_days Feature Display Name : Trial period duration in days Allowance Type : INTEGER_LIST Allowance : 0 Feature : search Feature Display Name : Comprehensive Search Allowance Type : BOOLEAN Allowance : true Feature : analysis_session Feature Display Name : Scenario Focused Troubleshooting Allowance Type : BOOLEAN Allowance : false Feature : pc_reporting Feature Display Name : Reporting Allowance Type : BOOLEAN Allowance : false Feature : sql_server_monitoring Feature Display Name : SQL Server Monitoring Content Pack Allowance Type : BOOLEAN Allowance : false Feature : app_monitoring Feature Display Name : Application Monitoring Allowance Type : BOOLEAN Allowance : false Feature : rich_alert_notification Feature Display Name : Rich Alert Notification Allowance Type : BOOLEAN Allowance : false Feature : virtual_infra_monitoring Feature Display Name : Virtual Infrastructure(including non- AOS) monitoring Allowance Type : BOOLEAN Allowance : false Feature : anomaly_detection Feature Display Name : Anomaly Detection Allowance Type : BOOLEAN Allowance : false Feature : what_if_analysis Feature Display Name : Just-In-Time Planning Allowance Type : BOOLEAN Allowance : false Feature : cost_metering Feature Display Name : Cost metering for resources Allowance Type : BOOLEAN Allowance : false Feature : one_click_upgrades_lcm Feature Display Name : 1-click Upgrades via LCM Allowance Type : BOOLEAN Allowance : true <ncli> 時計を年進めてみた結果となった

時計を年進めてみた結果のライセンスエラーも表示されたが等も含め、各機能は引き続き利用可能なおではライセンス設定画面は表示不可

その他 • など、独立したからの自動ダウンロードが出来ない仮想アプライアンスを使用するものや、クラウドサービスとして提供されるものはのスコープ外 – ただしそれらのトライアル版と
を組み合わせられる可能性はある • プラグインはユーザー向けにも提供される – との連携を試したい場合に必要 – コミュニティ内のダウンロードページから

気軽に試したいときはもあります！ • オンラインでを無償体験 ✓ 申し込んだらすぐデプロイ ✓ 回あたり最大時間
✓ 操作ガイド付き ✓ インフラの近代化 ✓ 運用の自動化 ✓ 事業継続性 ✓ ストレージ統合 ※その他続々追加中

まとめ

まとめはだけでなく、幅広いソリューションをカバーでインストールの仕組みが変更された＆が商用版相当のドライバしか含まない点に注意の要求リソースは商用と同等のため、
の「お手軽な入口」ではなく「沼へのご招待」気軽に試してみたいときは『』もあります！

Nutanix Community Edition 5.18 徹底解説 / Nutanix CE 5.18 Deep Dive

Nutanix Community Edition 5.18 徹底解説 / Nutanix CE 5.18 Deep Dive

More Decks by Satoshi Shimazaki

Other Decks in Technology

Featured

Transcript