Jak zbudowałem 3-węzłowy klaster Proxmox, wykorzystując ZimaCube 2 jako współdzielone zaplecze pamięci masowej

Eva Wong jest redaktorką techniczną i rezydentką majsterkowania w ZimaSpace. Jest geekiem od zawsze, z pasją do domowych laboratoriów i oprogramowania open source, a jej specjalnością jest przekładanie złożonych zagadnień technicznych na przystępne, praktyczne poradniki. Eva wierzy, że samodzielne hostowanie powinno sprawiać radość, a nie onieśmielać. Dzięki swoim samouczkom pomaga społeczności oswoić konfigurację sprzętu, od budowy pierwszego serwera NAS po opanowanie kontenerów Docker.

Trzy węzły Proxmox. Jeden ZimaCube 2. Dziesięciogigabitowy Ethernet. Wszystko to mieści się w regale Ikea Kallax i działa przez całą dobę, ciszej niż lodówka w sąsiednim pokoju.

To nie jest hipotetyczna konfiguracja. To mój homelab — w pełni wydrukowana w 3D szafa rack 10-calowa, która mieści się w standardowej kostce regału Kallax. Na dole znajduje się ZimaCube 2, pełniący funkcję mózgu współdzielonej pamięci masowej całego klastra. Oto dlaczego wybrałem ZimaCube 2 do tej roli, jak go zintegrowałem i czego się po drodze nauczyłem.


Architektura

Mój klaster składa się z trzech węzłów obliczeniowych z Proxmox, uruchamianych z pamięci eMMC, między którymi działa replikacja ZFS. Celem jest w pełni wysokodostępna infrastruktura hiperkonwergentna (HCI) — jeśli jeden węzeł przestanie działać, obciążenia zostaną automatycznie przeniesione, a pamięć masowa pozostanie spójna.

Replikacja ZFS między trzema węzłami ma jednak swoje ograniczenia. Nadal potrzebujesz współdzielonego zaplecza pamięci masowej — czegoś o odpowiedniej pojemności, przepustowości i niezawodności, by pełnić funkcję jedynego źródła prawdy dla całego klastra. Właśnie tu wkracza ZimaCube 2.

🧠 ZimaCube 2 jest mózgiem pamięci masowej klastra. Trzy węzły Proxmox obsługują obliczenia. ZimaCube 2 zajmuje się całą resztą — pamięcią masową współdzieloną, kopiami zapasowymi, zbiorami multimediów i siecią szkieletową 100GbE, która łączy to wszystko.

Dlaczego ZimaCube 2 jako zaplecze SAN/NAS

Rozważyłem wiele opcji, zanim zdecydowałem się na ZimaCube 2. Oto, co przesądziło o jego wyborze:

Czego potrzebowałem

  • Ponad 6 zatok na dyski do pul z różnymi dyskami HDD/NVMe

  • 10GbE do obsługi klastra bez wąskich gardeł

  • Rozszerzenie PCIe pod przyszłe ulepszenia GPU/NIC

  • Natywna obsługa Dockera do uruchamiania usług infrastrukturalnych obok pamięci masowej

  • Cichy na tyle, by stać w salonie (a nie w piwnicy)

  • Kompaktowy na tyle, by zmieścić się w kostce regału Kallax

Co oferuje ZimaCube 2

  • 6 zatok SATA3 + 4× NVMe M.2 w 7. zatoce

  • 10GbE (Marvell AQC113) + 2× 2.5GbE (Intel i226)

  • Gniazda PCIe x16 Gen4 + PCIe x8 Gen3

  • Fabrycznie zainstalowany ZimaOS z obsługą Dockera

  • 240 × 221 × 220 mm — idealnie pasuje do regału Kallax

  • Metalowa obudowa z aktywnym chłodzeniem, niemal bezgłośna w stanie bezczynności

Port 10GbE przesądził o wyborze. Jeśli udostępniasz pamięć masową jednocześnie trzem węzłom hiperwizora, pojedyncze połączenie gigabitowe od pierwszego dnia staje się wąskim gardłem. Dzięki 10GbE w ZimaCube 2 mogę nasycić sieć klastra, zanim nasycę zaplecze pamięci masowej.

Elegancki, srebrny mini-serwer ZimaCube 2 na drewnianej szafce w minimalistycznym salonie, obok telewizora

Konfiguracja pamięci masowej

Oto jak rozmieściłem pule pamięci masowej w ZimaCube 2:

Pula

Dyski

System plików

Przeznaczenie

Pamięć maszyn wirtualnych

2× NVMe (RAID 1)

ZFS

Obrazy maszyn wirtualnych i kontenerów Proxmox, miejsce docelowe migracji na żywo

Dane zbiorcze

4× HDD (RAID-Z1)

ZFS

Biblioteka multimediów, kopie zapasowe, archiwa ISO, zbiory danych

Szybka pamięć podręczna

1× NVMe

ZFS SLOG/L2ARC

Pamięć podręczna zapisu dla puli HDD, przyspieszenie dostępu do metadanych

System operacyjny + Docker

1× NVMe (wbudowany)

ext4

ZimaOS, kontenery Docker, usługi infrastruktury

Klaster łączy się z ZimaCube 2 przez dedykowane łącze 10GbE. Każdy węzeł Proxmox łączy się przez 2.5GbE z zarządzalnym przełącznikiem, a ZimaCube 2 jest podłączony do portu uplink 10GbE. Migracje maszyn wirtualnych na żywo odbywają się przez NFS z puli NVMe. Multimedia i kopie zapasowe znajdują się w puli HDD. Wszystko jest oparte na ZFS i korzysta z migawek.
Uwaga dotycząca rozbudowy pamięci RAM: ZimaCube 2 jest dostarczany z 8 GB DDR5 (Standard) lub 16 GB (Pro). W przypadku pamięci masowej opartej na ZFS więcej pamięci RAM to lepszy wybór — ZFS wykorzystuje w pamięci ARC (adaptacyjną pamięć podręczną wymiany), a każdy gigabajt ARC to gigabajt pamięci masowej, który nie obciąża dysku. Dodałem moduł DDR5 SODIMM 32 GB, zwiększając łączną pamięć do 40 GB. Dzięki temu ZFS ma mnóstwo miejsca na ARC, a kontenery Docker nie są pozbawione zasobów.


Fizyczna konstrukcja: wszystko wydrukowane w 3D

Cała konfiguracja mieści się w szafie rack 10-calowej, wydrukowanej w 3D na drukarce Elegoo Centauri Carbon i zaprojektowanej tak, by dokładnie pasowała do standardowej sześciennej półki Ikea Kallax.

ZimaCube 2 znajduje się na dole szafy rack — jego ciężar i wymagania dotyczące chłodzenia sprawiają, że naturalnie pełni funkcję podstawy. Nad nim: trzy węzły obliczeniowe, dedykowane urządzenie firewall i panel krosowniczy. Wszystko jest zamontowane za pomocą niestandardowych wsporników i paneli wentylacyjnych wydrukowanych w 3D.

📐 Wymiary ZimaCube 2 (240 × 221 × 220 mm) są wręcz niepokojąco idealne do szafy rack 10-calowej. Wygląda to tak, jakby IceWhale przed zaprojektowaniem obudowy zmierzyło sześcienną półkę Kallax. Szerokość 220 mm zapewnia po obu stronach standardowej 10-calowej półki akurat tyle miejsca, by zapewnić przepływ powietrza.

Wszystkie pliki STL i przeróbki są dostępne na MakerWorld i Printables. Zaprojektowałem niestandardowe mocowania do ZimaCube 2, urządzeń ZimaBoard SE i urządzenia firewall.

Tylny panel miniaturowego serwera ZimaCube 2 zamontowanego w drewnianej szafce, widoczne wielogigabitowe porty Ethernet, porty USB i kratki wentylacyjne

Dlaczego nie TrueNAS ani Unraid?

Zostawiłem ZimaOS na ZimaCube 2, zamiast go wymazywać i instalować TrueNAS lub Unraid. Oto dlaczego:

1.Docker od samego początku. Bez uciążliwego systemu wtyczek. Wystarczy uruchomić docker-compose up.

2.Wbudowana obsługa ZFS. Menedżer pamięci masowej ZimaOS obsługuje tworzenie pul ZFS i planowanie migawek, bez konieczności korzystania z terminala.

Terminal Linux na ZimaCube z poleceniami zpool create i informacją o prawidłowym stanie puli ZFS pool1: ONLINE


3.IceWhale aktywnie nad nim pracuje. Testuję wersję beta ZimaOS bezpośrednio od zespołu — reakcja na opinie społeczności jest naprawdę dobra.

4.Chciałem przetestować platformę zgodnie z jej przeznaczeniem. Zawsze można później wyczyścić dysk i zainstalować inny system. Jeśli jednak ZimaOS obsłuży te zadania, będzie to jeden system operacyjny mniej do skonfigurowania i utrzymania.

W przypadku zaplecza pamięci masowej klastra stabilność jest ważniejsza niż funkcje. Jak dotąd ZimaOS spełnia oczekiwania.


Co działa w klastrze

Na trzech węzłach Proxmox działają obecnie:

  • Home Assistant z Zigbee2MQTT — automatyka inteligentnego domu
  • Frigate NVR na dedykowanym ZimaBoard SE z Coral TPU — 4 kamery zewnętrzne, wykrywanie obiektów przeniesione na TPU
  • Paperless-ngx — zarządzanie dokumentami
  • Vaultwarden — zarządzanie hasłami
  • Nginx Proxy Manager — odwrotne proxy i SSL
  • Pi-hole — filtrowanie DNS w całej sieci
  • Gitea — samodzielnie hostowany Git do projektów osobistych
  • Kilka maszyn wirtualnych do programowania do testowania i nauki

ZimaCube 2 uruchamia też bezpośrednio kilka kontenerów infrastrukturalnych: Uptime Kuma do monitorowania, narzędzie do koordynowania kopii zapasowych i harmonogram migawek ZFS.

Zbuduj własne zaplecze pamięci masowej klastra z ZimaCube 2 →


Często zadawane pytania

Dlaczego warto użyć ZimaCube 2 zamiast tradycyjnego NAS-a w klastrze Proxmox?

Z trzech powodów: 10GbE, rozszerzenia PCIe i natywnej architektury ZFS. Większość konsumenckich urządzeń NAS ma port 1GbE, który od razu staje się wąskim gardłem podczas obsługi wielu hiperwizorów. Port 10GbE w ZimaCube 2 oraz dwa porty 2,5GbE zapewniają przepustowość potrzebną do udostępniania pamięci masowej bez rywalizacji o zasoby. Gniazdo PCIe pozwala później dodać kartę graficzną lub szybszą kartę sieciową bez wymiany całego urządzenia.

Czy ZimaOS dobrze obsługuje ZFS na potrzeby pamięci masowej klastra?

Tak. ZimaOS oferuje tworzenie pul ZFS, harmonogramowanie migawek i monitorowanie stanu w menedżerze pamięci masowej. W przypadku zaplecza klastra dostępne są wszystkie kluczowe funkcje — tworzenie pul, udostępnianie przez NFS/SMB i automatyzacja migawek — bez konieczności konfigurowania terminala.

Ile pamięci RAM potrzebuje ZimaCube 2 do obsługi ZFS?

ZFS wykorzystuje pamięć RAM do ARC (pamięci podręcznej), a jej większa ilość przyspiesza odczyt. Standardowe 8 GB lub 16 GB wystarcza do niewielkich obciążeń, ale w przypadku obsługi wielu maszyn wirtualnych lub kontenerów z dużym zestawem danych zaleca się rozbudowę do 32 GB lub 64 GB. Gniazda SODIMM DDR5 są dostępne dla użytkownika — rozbudowa zajmuje kilka minut.

Jaką zaletę daje umieszczenie Coral TPU w osobnym ZimaBoard SE zamiast w ZimaCube 2?

Przeniesienie wykrywania obiektów Frigate na dedykowany ZimaBoard SE z Coral TPU całkowicie odciąża procesor i kartę graficzną ZimaCube 2. ZimaCube 2 obsługuje pamięć masową i usługi Docker, a ZimaBoard SE zajmuje się analizą wideo w czasie rzeczywistym. Rozdzielenie tych zadań zapobiega rywalizacji przetwarzania obrazu z kamer o zasoby z operacjami wejścia/wyjścia maszyn wirtualnych lub wnioskowaniem AI w głównym systemie.

Centrum kampanii Zima

Więcej do przeczytania

Get More Builds Like This

Stay in the Loop

Get updates from Zima - new products, exclusive deals, and real builds from the community.

Stay in the Loop preferences

We respect your inbox. Unsubscribe anytime.