{"id":295449,"date":"2024-05-20T12:11:40","date_gmt":"2024-05-20T10:11:40","guid":{"rendered":"https:\/\/www.borncity.com\/blog\/?p=295449"},"modified":"2024-05-20T12:18:49","modified_gmt":"2024-05-20T10:18:49","slug":"google-hat-schon-wieder-cloud-instanzen-unbeabsichtigt-ausgeknipst","status":"publish","type":"post","link":"https:\/\/borncity.com\/blog\/2024\/05\/20\/google-hat-schon-wieder-cloud-instanzen-unbeabsichtigt-ausgeknipst\/","title":{"rendered":"Google hat schon wieder Cloud-Instanzen unbeabsichtigt ausgeknipst"},"content":{"rendered":"<p><img decoding=\"async\" title=\"Cloud\" style=\"float: left; margin: 0px 10px 0px 0px; display: inline\" src=\"https:\/\/borncity.com\/blog\/wp-content\/uploads\/2021\/05\/Cloud-Symbol.jpg\" width=\"200\" align=\"left\"\/>Google hat im Moment keinen richtigen Lauf, \u00c4rger mit seinen AI-Ans\u00e4tzen und nun kommen auch Cloud-Probleme hinzu. Nachdem unbeabsichtigt ein Online-Konto eines australischen Pensionsfonds gel\u00f6scht wurde, ging ich davon aus, dass Google jeden Schritt doppelt und dreifach absichert. Letzten Freitag ist aber wohl eine \"Putzaktion\" schief gelaufen und neben einer zu l\u00f6schenden Netzwerkinstanz wurden um die 33 weitere Cloud-Dienste f\u00fcr fast 3 Stunden gest\u00f6rt. Doof f\u00fcr betroffene Kunden, deren virtuelle Maschinen und Cloud-Instanzen nicht mehr funktionierten.<\/p>\n<p><!--more--><\/p>\n<h2>Alter Fall: Gekillter Pensionsfonds<\/h2>\n<p>I<img loading=\"lazy\" decoding=\"async\" alt=\"\" src=\"https:\/\/vg08.met.vgwort.de\/na\/f43dbefefe2e44ce8e17f4b022ee30e6\" width=\"1\" height=\"1\"\/>ch hatte im Blog-Beitrag <a href=\"https:\/\/borncity.com\/blog\/2024\/05\/13\/google-cloud-sorry-wir-haben-das-online-konto-eines-pensionsfonds-gelscht\/\">Google Cloud: Sorry, wir haben das Online-Konto\/-Abonnement eines Pensionsfonds gel\u00f6scht<\/a> \u00fcber das erste Cloud-Malheur berichtet. Ein australischer Pensionsfonds (UniSuper) hatte ein privates Cloud-Konto\/-Abonnement bei Google. Da wurden die Daten von 620.000 Mitgliedern verwaltet, der Pensionsfonds ist wohl 125 Milliarden australische Dollar schwer. Und dann war der Online-Zugang f\u00fcr die Mitglieder pl\u00f6tzlich weg \u2013 pulverisiert, aus der Cloud verschwunden, ohne irgend eine Spur zu hinterlassen. Guthabenkonten waren weg, und keiner wusste was. Am Ende des Tages stellt sich heraus, dass ein Konfigurationsfehler in der Google Cloud dazu f\u00fchrte, dass alle Online-Instanzen dieses Abonnements gel\u00f6scht worden waren. Das ist zwar alles wieder behoben, weil der Kunde Backups bei einem Drittanbieter hatte, und Google versicherte, alles zu tun, um eine Wiederholung zu verhindern.<\/p>\n<h2>Cloud-Putzaktion geht schief<\/h2>\n<p>Am vergangenen Freitag, den 17. Mai 2024 stand bei Google wieder eine \"Cloud-Wartung\" an. The Register <a href=\"https:\/\/www.theregister.com\/2024\/05\/20\/google_cloud_network_outage\/\" target=\"_blank\" rel=\"noopener\">schreibt hier<\/a>, dass Google um 15:22 Uhr US-Pazifikzeit eine \"Wartungsautomatisierung durchf\u00fchrte. Geplant war, eine ungenutzte Netzwerksteuerungskomponente an einem einzigen Standort abzuschalten.<\/p>\n<p>Das hat wohl auch geklappt, aber es wurden wohl um die 40 weitere Cloud-Instanzen mit gel\u00f6scht bzw. waren betroffen. Als Folge waren 33 s Google-Cloud-Dienste wie die Compute Engine und die Kubernetes Engine f\u00fcr zwei Stunden und achtundvierzig Minuten st\u00f6rt. Folgen waren st\u00f6rte Netzwerkfunktionen und Dienste wie:<\/p>\n<ul>\n<li>Neue VM-Instanzen wurden ohne Netzwerkkonnektivit\u00e4t bereitgestellt und konnten daher keine Netzwerkverbindungen herstellen;  <\/li>\n<li>Migrierte\/neugestartete VMs verloren die Netzwerkkonnektivit\u00e4t;  <\/li>\n<li>Virtuelle Netzwerkkonfigurationen (Firewalls, Netzwerk-Load-Balancer usw.) konnten nicht aktualisiert werden;  <\/li>\n<li>Partieller Paketverlust f\u00fcr bestimmte VPC-Netzwerkfl\u00fcsse wurde in us-central1 und us-east1 beobachtet;  <\/li>\n<li>Bei der dynamischen Portzuweisung (DPA) von Cloud NAT kam es zu Zuweisungsfehlern;  <\/li>\n<li>Bei der Erstellung neuer GKE-Knoten und Knotenpools kam es zu Fehlern.<\/li>\n<\/ul>\n<p>Betroffen waren laut Register auch andere Dienste, sowie die VMs in der Google-Cloud, wenn diese die Cloud Engine oder Aktualisierungen der Netzwerkkonfiguration ben\u00f6tigten. W\u00e4hrend der St\u00f6rung konnten diese Aufgaben nicht abgeschlossen werden. Der Vorfall war am vergangenen Freitag um 18:10 Uhr pazifischer Zeit beendet. <\/p>\n<p>Google teilte seinen Kunden mit, dass der Vorfall durch einen Fehler in der Automatisierungsfunktion zum Abschalten von Netzwerken verursacht wurde und dass das Problem behoben war, sobald die fehlerhafte Komponente neu gestartet wurde. Jetzt wurde der Mechanismus gesperrt, bis die Ursache analysiert und das Problem behoben wurde. Es hat wohl ausschlie\u00dflich US-Kunden in der Google-Cloud getroffen \u2013 oder war jemand unter der Leserschaft tangiert?<\/p>\n","protected":false},"excerpt":{"rendered":"<p>Google hat im Moment keinen richtigen Lauf, \u00c4rger mit seinen AI-Ans\u00e4tzen und nun kommen auch Cloud-Probleme hinzu. Nachdem unbeabsichtigt ein Online-Konto eines australischen Pensionsfonds gel\u00f6scht wurde, ging ich davon aus, dass Google jeden Schritt doppelt und dreifach absichert. Letzten Freitag &hellip; <a href=\"https:\/\/borncity.com\/blog\/2024\/05\/20\/google-hat-schon-wieder-cloud-instanzen-unbeabsichtigt-ausgeknipst\/\">Weiterlesen <span class=\"meta-nav\">&rarr;<\/span><\/a><\/p>\n","protected":false},"author":2,"featured_media":0,"comment_status":"open","ping_status":"","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[7263,7862],"tags":[1171,987],"class_list":["post-295449","post","type-post","status-publish","format-standard","hentry","category-cloud","category-stoerung","tag-cloud","tag-storung"],"_links":{"self":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/posts\/295449","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/comments?post=295449"}],"version-history":[{"count":0,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/posts\/295449\/revisions"}],"wp:attachment":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/media?parent=295449"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/categories?post=295449"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/tags?post=295449"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}