{"id":292950,"date":"2024-03-03T00:11:00","date_gmt":"2024-03-02T23:11:00","guid":{"rendered":"https:\/\/www.borncity.com\/blog\/?p=292950"},"modified":"2024-04-01T21:56:45","modified_gmt":"2024-04-01T19:56:45","slug":"bye-bye-vmware-esxi-erfahrungsbericht-zum-wechsel-zu-proxmox","status":"publish","type":"post","link":"https:\/\/borncity.com\/blog\/2024\/03\/03\/bye-bye-vmware-esxi-erfahrungsbericht-zum-wechsel-zu-proxmox\/","title":{"rendered":"Bye, bye VMware ESXi: Erfahrungsbericht zum Wechsel zu Proxmox"},"content":{"rendered":"

[English<\/a>]Leid, von VMware bez\u00fcglich Virtualisierungsl\u00f6sungen geg\u00e4ngelt zu werden bzw. ist das Auslaufen von VMware ESXi bereits absehbar? Viele Nutzer lieb\u00e4ugeln ja mit Proxmox als Alternative. Ein Blog-Leser hat sich da einiges angesehen und mir seine Eindr\u00fccke von einem Test zukommen lassen. Ich stelle das Ganze hier im Blog ein.<\/p>\n

<\/p>\n

\"\"Seit Broadcom den Anbieter VMware \u00fcbernommen und das Produktportfolie bereinigt hat, denken viele Administratoren \u00fcber einen Wechsel, weg von VMware ESXi Server, hin zur Virtualisierungsumgebung Proxmox nach. Blog-Leser Jochen hatte vor einigen Wochen im Rahmen meiner Berichterstattung auf BlueSky ge\u00e4u\u00dfert, dass er Proxmox testet. Ich hatte darauf hin gefragt, ob er mir nach Abschluss der Tests einige Stichworte bereitstellen k\u00f6nne, damit ich das f\u00fcr die Leserschaft als Beitrag aufbereiten kann. Dem ist Jochen nun nachgekommen und hat mir die Woche einige Eindr\u00fccke zukommen lassen.<\/p>\n

Die Ausgangslage<\/h2>\n

Die Ausgangslage bei Jochen ist, dass er f\u00fcr sich und seine Kunden im K(M)U-Bereich VMware ESXi-Server seit vielen Jahren einsetzte. Zuletzt wurde aber, Aufgrund der Gr\u00f6\u00dfe der Installationen, nur noch die freie Version des VMware ESXi-Server verwendet. Bei ihm bzw. Kunden sind noch die VMware ESXi Server-Versionen 6.5, 6.7 und 7.0 im Einsatz.<\/p>\n

Jochen gibt an, dass man selber auf dem ESXi 34 VM laufen habe (bzw. hatte) . Als Hardware kommt ein HPE ML 350 Gen9 Server, mit 2 * E5-2667 v3 CPUs und 128 GB RAM Speicher zum Einsatz. Im Laufe der Jahre wurden die SAS-Datastores zu SSD migriert. Als Notfall Backup Server stand ein betagter Fujitsu 1HE Rack Server mit einer E3-1270 v3 CPU und 32GB RAM bereit.<\/p>\n

Was l\u00e4uft an VMs?<\/h3>\n

Jetzt kann man sich die Frage stellen was da in 34 VM alles l\u00e4uft. Neben den Systemen f\u00fcr den eigenen Betrieb, Kunden-Monitoring und anderen Dingen wie Hausautomation h\u00e4ngt das auch mit dem Hobby Amateurfunk und dem Betrieb eines freien WLAN Netzes (MOEWA-NET) zusammen, schreibt Jochen. \"So sammeln sich f\u00fcr viele kleine Dienste einige VMs an. Und als IT-Unternehmen hat man nat\u00fcrlich auch TEST Systeme parat.\"<\/p>\n

Alle VM wurden, je nach Wichtigkeit, t\u00e4glich bis w\u00f6chentlich mit der Software XSIBackup auf ein QNAP NAS mit NFS gesichert. Und Regelm\u00e4\u00dfig wurden der Restore auf den Backup Server getestet. Bei den Kunden setzten die Mitarbeiter des Unternehmens, f\u00fcr das Jochen t\u00e4tig ist, das \u00e4hnlich um, teilweise noch mit einem zus\u00e4tzlichen Online Backup.<\/p>\n

Der Exit von Broadcom\/VMware steht an<\/h3>\n

Jochen schreibt: \"Wir haben uns hin und wieder mal mit anderen Hypervisoren besch\u00e4ftigt, wie Hyper-V, Proxmox, VirtualBox, XEN … Wobei wir bis 2021 keine Vorteile gegen\u00fcber dem VMware ESXi gesehen, und daher diese Schiene weiter verfolgt haben.\"<\/p>\n

Nachdem dann der Kauf von Broadcom durch war, klingelten im Unternehmen die Alarmglocken. Denn das Vorgehen von Broadcom ist in der Branche ja bekannt, meint Jochen – und ich hatte das hier im Blog ja auch angesprochen. Also musste f\u00fcr den IT-Dienstleister eine ESXi-EXIT-Strategie f\u00fcr das Unternehmen selbst und dessen Kunden her.<\/p>\n

In diesem Kontext wurden wieder verschiedene Hypervisor Systeme getestet. Dazu kam Anfangs der Backup Server zum Einsatz, da das Unternehmen hier die Performance kannte.<\/p>\n

Die erste Frage war dann: \"Will man von einer Abh\u00e4ngigkeit in eine andere wechseln, sprich zu Hyper-V wechseln?\" Die Antwort war klar: \"Nein wollen wir nicht, zumal Hyper-V ja auch auf der MS Abschussliste steht und das Gebaren von MS t\u00e4glich neu zu denken gibt.\" Mit dieser Pr\u00e4misse blieben nur noch die freien Systeme \u00fcbrig, von denen sich Jochen mit Kollegen uns noch mal Xen und Proxmox n\u00e4her angeschaut haben.<\/p>\n

Bei Proxmox 8 geblieben<\/h2>\n

Jochen beschreibt das Ergebnis der Tests als \"Wir sind dann bei Proxmox 8 VE h\u00e4ngen geblieben, hier hat der Hypervisor seit der zuletzt getesteten Version 5 den besten Eindruck hinterlassen. Auch das Proxmox Forum, teilweise in deutscher Sprache, macht einen sehr guten und hilfreichen Eindruck.<\/em>\"<\/p>\n

Zum Test haben sich die Mitarbeiter des IT-Dienstleisters 3 Wochen lang mit Proxmox auseinandergesetzt. Ziel war nicht nur der Umstieg von VMware ESXi auf Proxmox. Man wollte nach dem Umsteigen auch neue Features nutzen. Da das Unternehmen schon seit Jahren kein VMware V-Sphere mehr im Einsatz hatten, wurde sich also frisch mit Failover- und HA-Strategien besch\u00e4ftigt, die ja im Proxmox VE mit an Board sind.<\/p>\n

Proxmox-Cluster zum Test<\/h3>\n

Dazu haben die Mitarbeiter des IT-Dienstleisters dann aus ausrangierten PCs Proxmox-Cluster zusammengestellt und verschiedene Szenarien durchgespielt. Das hat erfahrungsgem\u00e4\u00df wirklich gedauert (lief neben dem normalen Business) und zu einigen Aha Effekten gef\u00fchrt. Auf jeden Fall, schreibt Jochen, haben wir folgende Erkenntnisse erhalten, die wir jetzt auch umgesetzt haben.<\/p>\n

1) Hardware-Raid oder ZFS Software-Raid
\n2) RAM Ausstattung
\n3) Festplatten\/SSD Ausstattung
\n4) Windows-, Linux- und andere Clients wie Mikrotik CHR und OpenWRT testen
\n5) USB Hardware (Dongle, Audio-Karten, etc.) lassen sich wie bei ESXi durchreichen<\/p>\n

Bei VMware ESXi musste man h\u00f6llisch aufpassen, so Jochen, das der Storage-Controller richtig unterst\u00fctzt wurde, und Hardware-Raid auch funktional vom ESXi genutzt werden konnte. Dazu musste man auf jeden Fall einen echten Raid-Controller mit BBU einsetzen, sonst gab es keine Performance.<\/p>\n

Proxmox mit ZFS nutzen<\/h3>\n

Wenn man Proxmox mit ZFS (Zero File System) nutzen m\u00f6chte, dann muss der (unter ESXi ben\u00f6tigte) Storage-Controller wieder raus und man nutzt einfache HBA-Controller um die Storage durchzureichen, so die Erfahrung von Jochen. Es gibt Controller die man sauber umschalten kann, schreibt er, manche k\u00f6nne man umflashen (scheidet beim Kundeneinsatz aber aus), aber in der Raid-Variante geht ZFS so nicht.<\/p>\n

Die Frage bei Proxmox ist, muss es ZFS sein?<\/h3>\n

Jochen schreibt dazu: Es geht nat\u00fcrlich auch mit ext4 oder LVM Storage (vom Hardware-Raid), und das l\u00e4uft nach unseren Tests gut, auch mit passender Performance. Aber irgendwann komme man dann an den Punkt, wo man gerne doch mal Failover, Replikation oder HA haben m\u00f6chte, und sei es nur zum ausprobieren. Und das ist der Punkt an dem man ZFS braucht. Es k\u00f6nnte auch btrfs gehen, das haben Jochen und Kollegen aber nicht mehr getestet. Und ZFS braucht RAM, und zwar einige GB damit es richtig schnell wird.<\/p>\n

Die Migration<\/h2>\n

\"Nachdem wir also den Hypervisor und die Hardware gekl\u00e4rt hatten, ging es an die Migration\", schreibt Jochen. Im Netz findet man viele Beschreibungen und Berichte, auch auf der Proxmox Seite selber. In den letzten Wochen wurden diese Infos, nach den Beobachtungen von Jochen, deutlich mehr, aber nicht alle passen zur aktuellen Proxmox 8-Version.<\/p>\n

Die Migrationsstategie des Dienstleisters f\u00fcr eigene Zwecke auch in K\u00fcrze bei Kunden, sieht wie folgt aus. Da der IT-Dienstleister keine neue Server-Hardware einsetzen m\u00f6chten, braucht man einen Zwischenschritt. Das beschreibt Jochen so:<\/p>\n