Bouw een Supercluster: High-Performance Computing met ZimaBoard

In de wereld van home labs en clustercomputing zijn er enthousiastelingen die graag de mogelijkheden verkennen en de grenzen verleggen van wat mogelijk is met compacte apparaten. Renée, een gepassioneerde techliefhebber en ZimaBoard-fan, begon aan een supercluster-project dat de kracht en veelzijdigheid van deze single-board servers liet zien.

In dit artikel spreken we met Renée en duiken we in haar reis, van de doelen en uitdagingen van het project tot de impact op het leren en de toekomstplannen voor deze indrukwekkende ZimaBoard-cluster.
Hieronder staan de superwerken:

Sectie 1: Kennismaken

Geïnterviewde: Renée

1. Kun je iets over jezelf en je achtergrond vertellen?

Renée: Hallo wereld, mijn naam is Renée. Een nerd noemen is eigenlijk een understatement. Ik hou van SciFi en ik vind het leuk om dingen te bekijken en te proberen te begrijpen hoe ze werken. Ik ben altijd iemand geweest die graag knutselt, onderzoekt wat werkt en wat niet. Ik haal dingen uit elkaar en bouw ze weer op om te zien of ik verbeteringen kan aanbrengen.

2. Hoe ben je voor het eerst betrokken geraakt bij ZimaBoard en de community?

Renée: Ik wilde me diepgaand verdiepen in clustercomputing. Toen ik ‘Raid Owl’ een hyper-geconvergeerde cluster zag bouwen, was ik meteen verkocht. Dit was PRECIES wat ik zocht—het voldeed aan mijn behoeften en de meeste van mijn wensen.

3. Wat inspireerde je om te gaan werken met single-board servers?

Renée: Om ver terug te gaan in mijn achtergrond, ik vond het fascinerend om naar de USS Enterprise NCC-1701-D te kijken en het technische handboek te bestuderen, vooral hoe het computersysteem werkte. Ze hadden zogenaamde Isolinear chips, dit waren single-board computers in een clusteropstelling, vaag beschreven in de jaren 80. Een van mijn eerste ervaringen was met een Raspberry Pi Zero, die gratis werd meegeleverd met een editie van Raspi Magazine. Ik werk met speciale programmeerbare logische besturingen voor industrieel gebruik, en ik was aanvankelijk sceptisch. Maar ik was verrast door de mogelijkheden van de Raspberry Pi Zero en realiseerde me dat deze kleine stap kon uitgroeien tot iets veel groters.

Sectie 2: Het ZimaBoard Super Cluster Project

Geïnterviewde: Renée

1. Kun je ons een overzicht geven van je supercluster-project? Wat was je hoofddoel?

Renée: Mijn huidige setup bestaat uit 6 ZimaBoards (5 als master nodes, 1 als load balancer) en 20 Raspberry Pi’s als agent nodes. Ik werk graag met K3S en Rancher, maar sta open voor het proberen van andere software. Ik wilde een rack-mounted setup creëren met voldoende opslag en energie-efficiëntie.

Om dit te bereiken, installeerde ik een Meanwell-voeding en gebruikte ik een lege rack-mounted plank met aangepaste modificaties. Met deze setup wilde ik praktische ervaring opdoen in netwerkinfrastructuur en cybersecurity, terwijl ik ook een stabiele productie-server voor mijn 3-2-1 back-upstructuur garandeerde.

2. Waarom koos je voor ZimaBoard voor dit project?

Renée: Ik bestelde aanvankelijk 5 ZimaBoards 832, met specifieke doelen voor ogen. Ik wilde energie-efficiëntie, lage kosten, onboard opslaggeheugen, minstens 2 netwerkpoorten, USB 3.0, eenvoudige resetmogelijkheden, virtualisatiedraadverwerking, x86-architectuur en uitbreidbaarheid met SSD of NVMe. ZimaBoards voldeden aan al deze criteria en waren bovendien kosteneffectief voor mijn home lab.

3. Kun je ons meenemen in het proces van het opzetten van de supercluster? Wat waren de belangrijkste stappen en uitdagingen?

Renée: Het opzetten van de supercluster omvatte de infrastructuur, inclusief een load balancer en een NTP-server. Het was cruciaal om dedicated clusternetwerken te hebben voor een soepele communicatie tussen de nodes. Uitdagingen waren onder andere het beheren van netwerksaturatie met meerdere nodes, het configureren van aparte switches voor controle-, communicatie- en opslagnetwerken, en het omgaan met het resilvering-proces in Ceph of Longhorn.

Ik gebruikte 2,5G uitbreidingskaarten voor dedicated opslagnetwerken en volgde een systematisch proces om het virtualisatieplatform te installeren, de servernodes te clusteren en agentnodes te implementeren.

Sectie 3: De impact en voordelen van het project

Geïnterviewde: Renée

1. Wat zijn de belangrijkste voordelen die je hebt ervaren door het gebruik van ZimaBoards voor je supercluster?

Renée: ZimaBoards bieden verrassend veel mogelijkheden voor hun formaat en prijs. Ze zijn energiezuinig, verbruiken weinig stroom en kunnen verschillende workloads aan. Het onboard opslaggeheugen en de uitbreidbaarheid met SSD of NVMe zorgen voor voldoende opslag voor mijn clusterbehoeften. ZimaBoards bieden ook betere netwerkcapaciteiten vergeleken met vergelijkbare alternatieven in deze prijsklasse.

2. Hoe heeft dit supercluster-project je leren en vaardigheden beïnvloed?

Renée: Het project was een enorme leerervaring. Ik heb praktische ervaring opgedaan met clusteropslag, netwerksaturatie en load balancing. Het proces van het opzetten en onderhouden van de supercluster heeft mijn vaardigheden in netwerkinfrastructuur, cybersecurity en clustermanagement ontwikkeld. Het heeft mijn kennis en begrip van gedistribueerde computersystemen verbreed.

Sectie 4: Toekomstplannen en advies

Geïnterviewde: Renée

1. Wat zijn je plannen voor de toekomst van je supercluster-project?

Renée: Mijn directe plannen zijn het stabiliseren van de huidige setup en het integreren in mijn productieomgeving. Ik wil de prestaties van de cluster optimaliseren en de mogelijkheden uitbreiden, zoals het verkennen van de potentie van containers voor deployment. Op de lange termijn wil ik deze cluster gebruiken als platform voor onderzoek en experimenten in verschillende gebieden, waaronder kunstmatige intelligentie en data-analyse.

2. Welk advies zou je geven aan anderen die geïnteresseerd zijn in het bouwen van hun eigen superclusters met ZimaBoards?

Renée: Wees niet bang om verschillende configuraties en opstellingen te proberen. Houd je productieomgeving gescheiden van je testomgeving om verstoringen te voorkomen. Omarm het leerproces en sta open voor voortdurende verbetering. ZimaBoards zijn capabeler dan ze op papier lijken, dus onderschat hun potentieel niet. Verken ook de mogelijkheden van containerisatie om te profiteren van de voordelen van modulaire deployment.

Conclusie:

Renée’s reis van het bouwen van een supercluster met ZimaBoards toont het potentieel en de veelzijdigheid van deze single-board servers aan. Het project benadrukt het belang van experimenteren, continu leren en het verleggen van de grenzen van wat deze compacte apparaten kunnen bereiken.

Renée’s inzichten en advies bieden waardevolle inspiratie voor de ZimaBoard-community en moedigen anderen aan om de mogelijkheden van clustercomputing met deze kosteneffectieve en capabele boards te verkennen.

Word lid van de IceWhale-community op Discord om meer te weten te komen over Geekers en hun superwerken. Je kunt Renée ook vinden op https://kessen.tech