Hemmaservrar, test utav HA och replikering med CEPH filsystem!
Huvudsakligen för att sätta upp och bibehålla en stabil miljö som skyddas med både Backups/HA och replikering över 3x noder med CEPH-filsystemet på Proxmox.
Överblick på miljön:
OPNSense-brandvägg som även agerar DHCP/VLAN-Hantering.
Mikrotik CSS326 som agerar accessswitch och hanterar portar till HA/CEPH på eget nät då dessa endast ska prata och synka med varandra.
3x Lenovo Thinkcentre M720q med Proxmox som hypervisor som kör CEPH-replikering utav samtliga virtuella maskiner/containrar ifall nod skulle fallera.
Varje fysisk nod har 3x nätverksinterface för VM-trafik, CEPH nät 1 och CEPH nät 2 för att sprida ut tung CEPH-synkningstrafik pga endast 1Gb/s länk per Interface.
Rackmonterad NAS dit backuper från virtuell Proxmox Backup Server synkas till en gång i månaden, samt som automatiska backuper utav enhetskonfiguration sparas till.
10 Gb/s länk till Mikrotik Switch som inte delar länk med management på NAS.
Nätverksövervakning sker främst med CheckMK på Nagios:
Detta för att få larm på temperaturer, RAM-användning, trafik och om någon enhet går ner.
Tack vare CEPH-replikering kan en virtuell maskin flyttas över från en fysisk nod till en annan utan att sessioner till den virtuella enheten bryts eller medför avbrott.
CheckMK skickar automatiskt meddelande privat om temperatur på fysisk enhet går över visst värde, eller om lagring på backup-diskar börjar fyllas upp.
Förenklad topologi från CheckMK:
De virtuella servrarna som övervakas har en tillhörighet till varje fysisk nod (Proxmox-Host’X’)
Det som drivs virtuellt är en blandning utav Debian, Windows-server samt Ubuntu-Server.
Kommande projekt till labbet?:
Sätta upp Core-switch innan Mikrotik CSS326 med LAG till 2x 10 Gb/s - portar på Accesswitch för redundans.
Fysisk serverhårdvara för att driva Proxmox Backup Server på bare-metal istället för virtuellt.
Grafana för snyggare övervakning, matad med data från Nagios/CheckMK.
Brandvägg, bättre hårdvara för OPNSense.
Uppgradering utav Proxmox till version 9.X från 8.0.4, med tillhörande CEPH-uppgradering.
Utvärdera VEEAM Community Edition för Proxmox om kan vara ersättare till Proxmox Backup Server