ZimaCube 2を共有ストレージバックエンドとして構築した3ノードProxmoxクラスターの作り方

Eva Wong は テクニカルライター であり、 生粋の技術好き としてZimaSpaceで活動しています。ホームラボやオープンソースソフトウェア をこよなく愛する生粋のギークで、複雑な技術概念をわかりやすく、実践的なガイド にまとめることを得意としています。Evaは、セルフホスティングは難しいものではなく、楽しむものだと考えています。チュートリアルを通じて、初めてのNAS構築からDockerコンテナの使いこなしまで、コミュニティがハードウェアのセットアップをわかりやすく理解できるよう 支援しています。、初めてのNAS構築からDockerコンテナの習得まで。

Proxmoxノードが3台、ZimaCube 2が1台、10ギガビットイーサネット。これらすべてをIkea Kallaxシェルフに収め、24時間365日稼働させています。隣の部屋にある冷蔵庫より静かです。

これは仮想的な構成例ではありません。私のホームラボです。ZimaCube 2を最下段に置き、クラスター全体の共有ストレージ中核として機能させた、標準的なKallaxキューブにすっきり収まる、完全3Dプリント製の10インチラックです。ここでは、この役割にZimaCube 2を選んだ理由、統合方法、そしてその過程で学んだことをご紹介します。


アーキテクチャ

私のクラスターには、eMMCを起動用ストレージとして使用し、ノード間でZFSレプリケーションを行うProxmox搭載のコンピューティングノードが3台あります。目指すのは、完全な高可用性HCIです。1台のノードが停止しても、ワークロードが自動的に移行し、ストレージの整合性が保たれます。

ただし、3台のノード間でZFSレプリケーションを行うだけでは不十分です。クラスター全体で信頼できる唯一の情報源として機能するには、十分な容量、帯域幅、信頼性を備えた共有ストレージバックエンドが必要です。そこでZimaCube 2の出番です。

🧠 ZimaCube 2はクラスターのストレージを担う中核です。3台のProxmoxノードがコンピューティングを担当し、ZimaCube 2が共有ストレージ、バックアップ、メディアデータセット、そして全体を結ぶ100GbEバックボーンなど、それ以外のすべてを担当します。

SAN/NASバックエンドにZimaCube 2を選んだ理由

ZimaCube 2に決めるまで、さまざまな選択肢を検討しました。これが最適な選択肢となった理由をご紹介します。

必要としていたもの

  • HDD/NVMe混在プールに対応する6基以上のドライブベイ

  • ボトルネックを起こさずにクラスターへデータを提供する10GbE

  • 将来のGPU/NICアップグレードに備えたPCIe拡張

  • ストレージと並行してインフラサービスを実行できるDockerネイティブ対応

  • 地下室ではなく、居住空間に置ける静音性

  • Kallaxのキューブに収まるコンパクトさ

ZimaCube 2でできること

  • SATA3ベイ6基 + 7つ目のベイにM.2 NVMeを4基

  • 10GbE(Marvell AQC113)+ 2.5GbE 2ポート(Intel i226)

  • PCIe x16 Gen4 + PCIe x8 Gen3スロット

  • Dockerに対応したZimaOSをプリインストール

  • 240 × 221 × 220 mm — Kallaxにぴったり収まるサイズ

  • アクティブ冷却を備えた金属製筐体。アイドル時はほぼ無音

決め手となったのは10GbEポートです。3台のハイパーバイザーノードに同時にストレージを提供する場合、ギガビット回線1本では初日からボトルネックになります。ZimaCube 2の10GbEなら、ストレージバックエンドの限界に達する前に、クラスターのネットワーク帯域を使い切れます。

ミニマルなリビングルームで、テレビの横にある木製サイドボードに置かれた、シルバーの洗練されたZimaCube 2ミニサーバー

ストレージ構成

ZimaCube 2のストレージプールは次のように構成しました。

プール

ドライブ

ファイルシステム

用途

VMストレージ

NVMe 2台(RAID 1)

ZFS

Proxmox VM/CTイメージ、ライブマイグレーション先

大容量データ

HDD 4台(RAID-Z1)

ZFS

メディアライブラリ、バックアップ、ISOアーカイブ、データセット

高速キャッシュ

NVMe × 1

ZFS SLOG/L2ARC

HDDプールの書き込みキャッシュ、メタデータの高速化

OS+Docker

NVMe × 1(オンボード)

ext4

ZimaOS、Dockerコンテナ、インフラストラクチャサービス

クラスターは専用の10GbEリンク経由でZimaCube 2にアクセスします。各Proxmoxノードは2.5GbEでマネージドスイッチに接続し、ZimaCube 2は10GbEアップリンクポートに接続しています。VMのライブマイグレーションはNVMeプール上のNFS経由で行い、メディアとバックアップはHDDプールに保存しています。すべてZFSベースで、スナップショットにも対応しています。
RAM増設について:ZimaCube 2には8GB DDR5(Standard)または16GB(Pro)が搭載されています。ZFSベースのストレージバックエンドでは、RAMは多いほど有利です。ZFSはメモリ上でARC(適応型置換キャッシュ)を使用するため、ARCが1GB増えるごとに、ディスクにアクセスせずに済むストレージが1GB増えます。DDR5 SODIMMを32GB追加して合計40GBにしました。DockerコンテナのRAMを圧迫せずに、ZFSに十分なARC用メモリを確保できます。


物理的な組み立て:すべて3Dプリント

セットアップ全体は10インチラック規格で、Elegoo Centauri Carbonで3Dプリントし、標準的なIKEA Kallaxの棚のキューブ内にぴったり収まるよう設計しました。

ZimaCube 2はラックの最下段に設置しています。重量と冷却要件を考えると、土台にするのが自然です。その上には、3台のコンピュートノード、専用ファイアウォールアプライアンス、パッチパネルを配置しています。すべてカスタムの3Dプリント製ブラケットと通気パネルで固定しています。

📐 ZimaCube 2のサイズ(240 × 221 × 220 mm)は、10インチラックの規格に驚くほどぴったりです。IceWhaleはシャーシの設計前に、IKEA Kallaxのキューブを測ったのではないかと思うほどです。幅220mmなので、標準的な10インチ棚の左右に通気用のスペースがちょうど確保できます。

すべてのSTLファイルとリミックスはMakerWorldとPrintablesで公開しています。ZimaCube 2、ZimaBoard SEユニット、ファイアウォールアプライアンス用にカスタムマウントを設計しました。

木製キャビネット内に取り付けられたZimaCube 2ミニサーバーの背面パネル。マルチギガビットEthernet、USBポート、通気グリルが見える

TrueNASやUnraidを選ばない理由

TrueNASやUnraidに入れ替えるために消去せず、ZimaCube 2でZimaOSを使い続けることにしました。その理由を説明します。

1.初日からDockerネイティブ。面倒なプラグインシステムは不要です。docker-compose upを実行すれば完了です。

2.ZFSを標準搭載。ZimaOSのストレージマネージャーなら、ターミナルを使わずにZFSプールの作成やスナップショットのスケジュール設定ができます。

ZimaCube上のLinuxターミナルに、zpool createコマンドと正常なONLINE状態のZFS pool1ストレージの出力が表示されている


3.IceWhaleは現在も精力的に開発を進めています。チームから直接提供されたZimaOSのベータ版をテストしていますが、コミュニティからのフィードバックへの対応は本当に良好です。

4.プラットフォームを設計どおりにテストしたかったのです。後からいつでも消去して、別のものをインストールできます。しかし、ZimaOSでワークロードを処理できれば、設定や保守が必要なOSが1つ減ります。

クラスター用ストレージバックエンドでは、機能より安定性が重要です。これまでのところ、ZimaOSはその期待に応えています。


クラスターで稼働しているもの

現在、3台のProxmoxノードでは次のサービスを稼働させています。

  • Home AssistantとZigbee2MQTT — スマートホームの自動化
  • Frigate NVRをCoral TPU搭載の専用ZimaBoard SEで稼働 — 屋外カメラ4台、物体検知はTPUにオフロード
  • Paperless-ngx — ドキュメント管理
  • Vaultwarden — パスワード管理
  • Nginx Proxy Manager — リバースプロキシとSSL
  • Pi-hole — ネットワーク全体のDNSフィルタリング
  • Gitea — 個人プロジェクト用のセルフホスト型Git
  • 開発用VMをいくつか — テストと学習用

ZimaCube 2では、監視用のUptime Kuma、バックアップオーケストレーター、ZFSスナップショットスケジューラーなど、いくつかのインフラ用コンテナも直接実行しています。

ZimaCube 2で自分だけのクラスター用ストレージバックエンドを構築 →


よくある質問

Proxmoxクラスターに従来型NASではなくZimaCube 2を使う理由は何ですか?

理由は3つあります。10GbE、PCIe拡張、そしてZFSネイティブのアーキテクチャです。多くの一般消費者向けNASは1GbEを搭載しており、複数のハイパーバイザーにストレージを提供するとすぐにボトルネックになります。ZimaCube 2は10GbEポートに加えてデュアル2.5GbEを備えており、競合なくストレージを提供できる帯域幅があります。また、PCIeスロットを備えているため、デバイス全体を交換せずに、後からGPUやより高速なNICを追加できます。

ZimaOSはクラスター用ストレージとして十分にZFSを扱えますか?

はい。ZimaOSのストレージマネージャーには、ZFSプールの作成、スナップショットのスケジュール設定、健全性の監視機能が含まれています。クラスターのバックエンドに必要なプール作成、NFS/SMB共有、スナップショットの自動化といった主要機能がすべて揃っており、ターミナルでの設定は不要です。

ZFSにはZimaCube 2のRAMがどれくらい必要ですか?

ZFSはARC(キャッシュ)にRAMを使用するため、RAMが多いほど読み取り性能が向上します。標準の8GBまたは16GBでも軽いワークロードには対応できますが、大規模なデータセットで複数のVMやコンテナを稼働させる場合は、32GBまたは64GBへの増設がおすすめです。SODIMM DDR5スロットはユーザーがアクセスできるため、増設は数分で完了します。

Coral TPUをZimaCube 2ではなく、別のZimaBoard SEに搭載するメリットは何ですか?

Frigateの物体検知を専用のZimaBoard SEとCoral TPUにオフロードすることで、推論処理の負荷をZimaCube 2のCPUとGPUから完全に切り離せます。ZimaCube 2はストレージとDockerサービスを担当し、ZimaBoard SEはリアルタイムの動画解析を担当します。これらのワークロードを分離することで、カメラの処理がメインシステム上のVMのI/OやAI推論と競合するのを防げます。

Zimaキャンペーンハブ

続きを読む

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.