{"id":260306,"date":"2021-12-08T17:10:15","date_gmt":"2021-12-08T16:10:15","guid":{"rendered":"https:\/\/www.borncity.com\/blog\/?p=260306"},"modified":"2022-03-07T18:06:24","modified_gmt":"2022-03-07T17:06:24","slug":"amazon-aws-cloud-ausfall-sorgt-fr-chaos-8-12-2021","status":"publish","type":"post","link":"https:\/\/borncity.com\/blog\/2021\/12\/08\/amazon-aws-cloud-ausfall-sorgt-fr-chaos-8-12-2021\/","title":{"rendered":"Amazon AWS-Cloud-Ausfall sorgt für Chaos (8.12.2021)"},"content":{"rendered":"

[English<\/a>]Zum heutigen 8. Dezember 2021 gab es eine gr\u00f6\u00dfere St\u00f6rung bei den Amazon AWS Services in den USA. Der Amazon Cloud-Dienst war f\u00fcr ca. 8 Stunden gest\u00f6rt, und alle Nutzer, die auf diesen Dienst angewiesen waren, schauten ziemlich in die R\u00f6hre. Keine Bestellungen mehr, Alexa, Ring und Disney Plus streikten ebenfalls. K\u00f6nnte f\u00fcr einige Nutzer ein gr\u00f6\u00dferes Drama gewesen sein.<\/p>\n

<\/p>\n

\"\"Die Probleme mit den Amazon Web Services begannen um 9:37 Uhr (Pazifik-Zeit), als die Server f\u00fcr die US-Ostk\u00fcste nur noch langsam Inhalte ausgeliefert haben bzw. Fehler berichteten. Als Ursache f\u00fcr dieses Problem wurde eine Beeintr\u00e4chtigung mehrerer Netzwerkger\u00e4te in der Region US-EAST-1 identifiziert. Von Amazon gibt es diese Statusmeldungen<\/a> \u00fcber den Ausfall.<\/p>\n

[RESOLVED] API Error Rates in US-EAST-1<\/p><\/blockquote>\n

[9:37 AM PST]<\/b> We are seeing impact to multiple AWS APIs in the US-EAST-1 Region. This issue is also affecting some of our monitoring and incident response tooling, which is delaying our ability to provide updates. We have identified the root cause and are actively working towards recovery.
\n[10:12 AM PST]<\/b> We are seeing impact to multiple AWS APIs in the US-EAST-1 Region. This issue is also affecting some of our monitoring and incident response tooling, which is delaying our ability to provide updates. We have identified root cause of the issue causing service API and console issues in the US-EAST-1 Region, and are starting to see some signs of recovery. We do not have an ETA for full recovery at this time.
\n[11:26 AM PST]<\/b> We are seeing impact to multiple AWS APIs in the US-EAST-1 Region. This issue is also affecting some of our monitoring and incident response tooling, which is delaying our ability to provide updates. Services impacted include: EC2, Connect, DynamoDB, Glue, Athena, Timestream, and Chime and other AWS Services in US-EAST-1. The root cause of this issue is an impairment of several network devices in the US-EAST-1 Region. We are pursuing multiple mitigation paths in parallel, and have seen some signs of recovery, but we do not have an ETA for full recovery at this time. Root logins for consoles in all AWS regions are affected by this issue, however customers can login to consoles other than US-EAST-1 by using an IAM role for authentication.
\n[12:34 PM PST]<\/b> We continue to experience increased API error rates for multiple AWS Services in the US-EAST-1 Region. The root cause of this issue is an impairment of several network devices. We continue to work toward mitigation, and are actively working on a number of different mitigation and resolution actions. While we have observed some early signs of recovery, we do not have an ETA for full recovery. For customers experiencing issues signing-in to the AWS Management Console in US-EAST-1, we recommend retrying using a separate Management Console endpoint (such as https:\/\/us-west-2.console.aws.amazon.com\/<\/a>). Additionally, if you are attempting to login using root login credentials you may be unable to do so, even via console endpoints not in US-EAST-1. If you are impacted by this, we recommend using IAM Users or Roles for authentication. We will continue to provide updates here as we have more information to share.
\n[2:04 PM PST]<\/b> We have executed a mitigation which is showing significant recovery in the US-EAST-1 Region. We are continuing to closely monitor the health of the network devices and we expect to continue to make progress towards full recovery. We still do not have an ETA for full recovery at this time.
\n[2:43 PM PST]<\/b> We have mitigated the underlying issue that caused some network devices in the US-EAST-1 Region to be impaired. We are seeing improvement in availability across most AWS services. All services are now independently working through service-by-service recovery. We continue to work toward full recovery for all impacted AWS Services and API operations. In order to expedite overall recovery, we have temporarily disabled Event Deliveries for Amazon EventBridge in the US-EAST-1 Region. These events will still be received & accepted, and queued for later delivery.
\n[3:03 PM PST]<\/b> Many services have already recovered, however we are working towards full recovery across services. Services like SSO, Connect, API Gateway, ECS\/Fargate, and EventBridge are still experiencing impact. Engineers are actively working on resolving impact to these services.
\n[4:35 PM PST]<\/b> With the network device issues resolved, we are now working towards recovery of any impaired services. We will provide additional updates for impaired services within the appropriate entry in the Service Health Dashboard.<\/p><\/blockquote>\n

Das Magazin Vice schreibt hier<\/a>, dass Websites und Online-Dienste (einschlie\u00dflich Motherboard), die bei Amazon gehostet sind, aufgrund eines anhaltenden Ausfalls der Amazon Web Services weltweit von Ausf\u00e4llen und technischen Schwierigkeiten betroffen seien. H\u00e4rter hat es wohl die Amazon-Angestellten getroffen. Hunderte von Amazon-Lagerarbeitern und Lieferfahrern berichteten, dass die Lieferinfrastruktur des Unternehmens zum Stillstand gekommen ist und allgemein im Chaos versinkt. Hintergrund ist, dass die Flex-App, die f\u00fcr kritische Liefervorg\u00e4nge verwendet wird, und die Dolphin-App, die f\u00fcr die Zeiterfassung und andere Vorg\u00e4nge verwendet wird, den ganzen Morgen des 8. Dezember ausgefallen waren. Ein Amazon-Mitarbeiter scherzte<\/a>, dass er momentan mehr als Jeff Bezoz verdiene, weil sein Gehalt weiter gehe, w\u00e4hrend Amazon Verluste schreibe.<\/p>\n

I am making more money than Jeff bezos in this moment<\/p>\n

\"\"Right now everything is down world wide and I am still getting paid double over time.<\/p>\n

Amazon is on stand still so I sure this second alone he is losing $$$$$<\/p><\/blockquote>\n

Das Medium The Verge hat in diesem Artikel<\/a> einen breiteren Blick riskiert. Die erw\u00e4hnen Berichte \u00fcber Ausf\u00e4lle bei Disney Plus und Netflix-Streaming sowie bei Spielen wie PUBG, League of Legends und Valorant. Die Redaktion hat auch einige Probleme beim Zugriff auf Amazon.com und andere Amazon-Produkte wie den KI-Assistenten Alexa, Kindle ebooks, Amazon Music und Sicherheitskameras von Ring oder Wyze festgestellt. Die DownDetector-Liste der Dienste mit gleichzeitigen Ausf\u00e4llen umfasst fast alle bekannten Namen: Tinder, Roku, Coinbase, sowohl Cash App als auch Venmo, und die Liste geht weiter. Der Vorfall zeigt, dass man auch in der Cloud extrem von Ausf\u00e4llen abh\u00e4ngig ist – und wenn die Cloud steht, sind gleich Millionen Menschen betroffen.<\/p>\n

Erg\u00e4nzungen:<\/strong> Die Kollegen bei heise haben zwei ganz lesenswerte Beitr\u00e4ge\u00a0Amazons AWS-Cloud f\u00e4llt aus und die IT-Welt steht (nicht) still<\/a> und Kommentar: Die Cloud ist ja so sch\u00f6n bequem \u2013 es darf nur nirgends was passieren<\/a> ver\u00f6ffentlicht. Selbst wer nicht in der AWS-Cloud gehostet hatte, konnte \u00fcber abh\u00e4ngige Dienste in verwendeten Software-Paketen betroffen sein. Auf Facebook gab es einen Kommentar zu meinem Post, wo ein Admin eingestand, dass sie betroffen waren. Beim Versuch, das Hosting auf US-WEST umzuziehen, h\u00e4tte man neue Zertifikate gebraucht. Eine ganze Reihe dieser Zertifikatsdienste waren aber von AWS abh\u00e4ngig und hosteten auf US-EAST-1. Es zeigt sich, dass da ein Rattenschwanz an Problemen existiert und eigentlich keiner mehr durchblickt. Der Ausfall der ganzen Dienste f\u00fcr Ring-Doorbell-Kamera, Alexa etc. wirft ggf. komplette Sicherheitsarchitekturen aufs Kreuz. Und wenn ich im Artikel Umzug der MagentaCloud: Daten bis 5.12. sichern, ab 6.12. f\u00fcr 3 Tage kein Zugriff<\/a> mitbekomme, dass Leute richtig Handst\u00e4nde machen m\u00fcssen und drei Tage nicht in die Magenta-Cloud k\u00f6nnen, ruft das keine Freude hervor. Keine guten Aussichten.<\/p>\n

AWS schon wieder down (15.12.2021)<\/h2>\n

Zum heutigen 15. Dezember 2021 gab es eine erneute St\u00f6rung bei den Amazon AWS Services in den USA. Dieser anhaltende Ausfall begann um ca. 7:43 AM Pacific Standard Time (PST) und betraf laut AWS-Statusseite die Regionen US-WEST-1 und US-WEST-2. Der Ausfall zog eine Reihe an Diensten wie Twitch, Zoom, PSN, Doordash, Quickbooks Online und Hulu.<\/p>\n

<\/p>\n

Nachfolgender Tweet<\/a> zeigt, dass eine Reihe an Webseiten und Diensten von deisem Ausfall betroffen sind.<\/p>\n

\"AWS<\/a><\/p>\n

Die Kollegen von Bleeping Computer haben hier<\/a> einen Artikel zum Ausfall ver\u00f6ffentlicht. AWS-Experten arbeiten sich an der Behebung des Ausfall ab und haben Schritte zur Wiederherstellung unternommen. Auf der AWS-Statusseite hie\u00df es:<\/p>\n

Wir haben die Ursache f\u00fcr die Internetverbindung zur Region US-WEST-2 identifiziert und Schritte zur Wiederherstellung der Konnektivit\u00e4t unternommen.<\/p><\/blockquote>\n

In Europa ist dagegen keine Beeintr\u00e4chtigung der Dienste auf der Statusseite<\/a> zu finden.<\/p>\n","protected":false},"excerpt":{"rendered":"

[English]Zum heutigen 8. Dezember 2021 gab es eine gr\u00f6\u00dfere St\u00f6rung bei den Amazon AWS Services in den USA. Der Amazon Cloud-Dienst war f\u00fcr ca. 8 Stunden gest\u00f6rt, und alle Nutzer, die auf diesen Dienst angewiesen waren, schauten ziemlich in die … Weiterlesen →<\/span><\/a><\/p>\n","protected":false},"author":2,"featured_media":0,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[7862],"tags":[919,1171,987],"class_list":["post-260306","post","type-post","status-publish","format-standard","hentry","category-stoerung","tag-amazon","tag-cloud","tag-storung"],"_links":{"self":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/posts\/260306","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/comments?post=260306"}],"version-history":[{"count":0,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/posts\/260306\/revisions"}],"wp:attachment":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/media?parent=260306"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/categories?post=260306"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/tags?post=260306"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}