{"id":272168,"date":"2022-08-22T12:59:45","date_gmt":"2022-08-22T10:59:45","guid":{"rendered":"https:\/\/www.borncity.com\/blog\/?p=272168"},"modified":"2023-10-01T10:56:07","modified_gmt":"2023-10-01T08:56:07","slug":"google-kontensperre-und-polizeieinsatz-wegen-baby-foto-fr-den-arzt","status":"publish","type":"post","link":"https:\/\/borncity.com\/blog\/2022\/08\/22\/google-kontensperre-und-polizeieinsatz-wegen-baby-foto-fr-den-arzt\/","title":{"rendered":"Google-Kontensperre und Polizeieinsatz wegen Baby-Foto f&uuml;r den Arzt"},"content":{"rendered":"<p><img decoding=\"async\" style=\"float: left; margin: 0px 10px 0px 0px; display: inline;\" title=\"Stop - Pixabay\" src=\"https:\/\/borncity.com\/blog\/wp-content\/uploads\/2021\/06\/Stop01.jpg\" alt=\"Stop - Pixabay\" align=\"left\" \/>[<a href=\"https:\/\/borncity.com\/win\/2022\/08\/22\/google-kontensperre-und-polizeieinsatz-wegen-baby-foto-fr-den-arzt\/\" target=\"_blank\" rel=\"noopener\">English<\/a>]\u00dcber pl\u00f6tzliche Sperren von Online-Konten bei amerikanischen Cloud-Anbietern (Apple, Google, und vor allem Microsoft) habe ich ja hier im Blog h\u00e4ufiger berichtet. Gerade kocht ein Fall in den USA hoch, bei dem Google ein Konto wegen hochgeladener \"Nacktfotos\" sperrte und die Polizei wegen Verdachts auf Kindesmissbrauch benachrichtigt. Gab dann nat\u00fcrlich das volle Programm der Polizei f\u00fcr den Betroffenen. Das einzige \"Vergehen\": Er hatte ein Foto seines nackten S\u00e4uglings f\u00fcr den behandelnden Arzt per Smartphone aufgenommen. Der automatisch Cloud-Upload und eine doofe KI sorgten dann f\u00fcr die drastischen Folgen.<\/p>\n<p><!--more--><\/p>\n<h2>Der \"Fall\"<\/h2>\n<p><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/vg05.met.vgwort.de\/na\/03ee01c9c6eb445b963438abacfc1040\" alt=\"\" width=\"1\" height=\"1\" \/>Kindesmissbrauch ist ja ein hei\u00dfes Eisen und was als \"anst\u00f6\u00dfig\" gilt, h\u00e4ngt auch vom Land, dem Rechtssystem und dem Kulturkreis ab. Die USA sind da teilweise ein \"hei\u00dfes Pflaster\", was Aktionen gegen vermuteten Kindesmissbrauch angeht. Echter Missbrauch von Kindern ist klar strafbar, und sollte auch verfolgt werden.<\/p>\n<p>Aber die US-Technologieanbieter von Cloud-Speicher laufen in ein echtes Problem: Es m\u00fcssen Unmengen von Inhalten bewertet werden, um die echten F\u00e4lle von \"Child Sexual Abuse Material\" (CSAM) herauszufiltern. Dabei kommt k\u00fcnstliche Intelligenz (AI) zum Einsatz, die aber wenig Intelligenz besitzt. Wer \"positiv\" auff\u00e4llt, obwohl in den Online-Speicher hochgeladenes Material harmlos ist, kann ganz sch\u00f6n Schwierigkeiten bekommen. Da gehen automatisiert Anzeigen an Strafverfolger in aller Welt. Ich bin \u00fcber Techmeme sowie den nachfolgenden <a href=\"https:\/\/twitter.com\/hunterwalk\/status\/1561380403566370821\" target=\"_blank\" rel=\"noopener\">Tweet<\/a> auf den Sachverhalt gesto\u00dfen.<\/p>\n<p><a href=\"https:\/\/twitter.com\/hunterwalk\/status\/1561380403566370821\" target=\"_blank\" rel=\"noopener\"><img decoding=\"async\" title=\"Wrong CSAM flag by Google\" src=\"https:\/\/i.imgur.com\/A50gsha.png\" alt=\"Wrong CSAM flag by Google\" \/><\/a><\/p>\n<p>Der Sachverhalt, der von The Verge <a href=\"https:\/\/www.theverge.com\/2022\/8\/21\/23315513\/google-photos-csam-scanning-account-deletion-investigation?scrolla=5eb6d68b7fedc32c19ef33b4\" target=\"_blank\" rel=\"noopener\">hier<\/a> aufgegriffen wurde, aber auf einen Bericht der <a href=\"https:\/\/web.archive.org\/web\/20230923010938\/https:\/\/www.nytimes.com\/2022\/08\/21\/technology\/google-surveillance-toddler-photo.html\" target=\"_blank\" rel=\"nofollow noopener\">New York Times<\/a> zur\u00fcckgeht, hat es in sich. Der Titel \"<em>Google AI flagged parents' accounts for potential abuse over nude photos of their sick kids<\/em>\" bringt es schon auf den Punkt. Ein Google-Konto von Eltern wurde als \"enth\u00e4lt m\u00f6glicherweise Abbildungen von Kindesmissbrauch\" markiert &#8211; dabei hatten die Eltern lediglich Hautver\u00e4nderungen bei einem kranken Kind f\u00fcr den Arzt fotografiert.<\/p>\n<p>Konkret lag folgender Sachverhalt vor:\u00a0Ein Vater (der als Hausmann t\u00e4tig war, w\u00e4hrend die Ehefrau arbeitete) bemerkte im Februar 2021, dass etwas mit seinem kleinen Sohn nicht stimmte. Das Kleinkind hatte einen geschwollenen Penis und wohl Schmerzen. Der besorgte Vater dokumentierte dann mit seinem Android-Smartphone mit Fotos den Verlauf der Infektion seines Kleinkindes in dessen Leistengegend, um dem behandelnden Arzt Hinweise auf die Erkrankung zu liefern.<\/p>\n<p>Als die Mutter Abends von der Arbeit nach Hause kam, hatte sich die Problematik beim Kind nicht gebessert. \u00c4rzte hatten wohl ihre Praxen geschlossen und es war kurz vor Wochenende. Freitagabend im Februar 2021 rief die Ehefrau eine Krankenschwester ihres Gesundheitsdienstleisters an, um f\u00fcr den n\u00e4chsten Morgen eine Notfallsprechstunde per Video zu vereinbaren. Diese Sprechstunde w\u00e4re am Samstag gewesen und es herrschte die COVID-19-Pandemie. Die Krankenschwester bat darum, Fotos zu schicken, damit der Arzt sie sich vorher ansehen k\u00f6nne.<\/p>\n<div class=\"post\">\n<div class=\"body\">\n<div id=\"a2206835-d697-43ef-a90d-cf51ee83e8d0\" class=\"postBody\" style=\"margin: 4px 0px 0px; border-width: 0px; padding: 0px;\" contenteditable=\"true\">\n<p>Die Ehefrau schnappte sich das Handy ihres Mannes und schickte ein paar hochwertige Nahaufnahmen der Leistengegend ihres Sohnes auf ihr iPhone, wie die New York Times berichtet, damit sie diese zum Arzt hochladen konnte. Auf einem Bild war Marks Hand zu sehen, was die Schwellung besser erkennen lie\u00df. Mit Hilfe der Fotos diagnostizierte der Arzt das Problem und verschrieb Antibiotika, die die Krankheit schnell behoben.<\/p>\n<p>An dieser Stelle war das Kind dann aber bereits \"buchst\u00e4blich in den Brunnen gefallen\", denn sowohl Apple als auch Google \u00fcberwachen die Ger\u00e4te bzw. die in die Cloud hochgeladenen Fotos und Daten auf Inhalte von m\u00f6glichem Kindesmissbrauch.<\/p>\n<p>Mark und seine Frau machten sich an dieser Stelle keine Gedanken \u00fcber die Tech-Giganten, die zwar eine schnelle Erfassung und den Austausch digitaler Daten erm\u00f6glichen. Sie dachten auch nicht dar\u00fcber nach, was bei den Firmen mit diesem Fotos passierten k\u00f6nnte.<\/p>\n<p>Und so ging dieser Vorgang dann erwartbar schief, da die Bilder der meisten Android-Benutzer automatisch in die Google Cloud als Backup hochgeladen werden (oder in diesem Fall \u00fcber die Cloud-Dienste von Google und Apple verschickt werden).<\/p>\n<\/div>\n<\/div>\n<\/div>\n<ul>\n<li>Die von Google eingesetzte Software schlug an, und markierte die Fotos als Material \u00fcber sexuellen Kindesmissbrauch (CSMA).<\/li>\n<li>Gleichzeitig sperrte Google das Konto des Mannes &#8211; f\u00fcr manche Menschen ein herber Schlag, da diese digital ausgel\u00f6scht werden.<\/li>\n<li>Google erstattete Anzeige beim National Center for Missing and Exploited Children (NCMEC), was zu einer polizeilichen Ermittlung f\u00fchrte.<\/li>\n<\/ul>\n<p>Alleine die Kontensperre d\u00fcrfte f\u00fcr manche Benutzer bereits ein herber Schlag sein, da der Zugriff auf das digitale Leben verloren geht. Der Vater verlor durch die Kontensperre mehr als ein Jahrzehnt an Kontakten, E-Mails und Fotos. H\u00e4ngen noch 2FA-Absicherung (Google Authenticator) oder weitere Zug\u00e4nge daran, sieht es sehr, sehr schlecht aus. Ich hatte ja auf diesen Sachverhalt bei diversen Microsoft-F\u00e4llen hingewiesen (siehe Artikel am Beitragsende). Da haben Leute Tausende Dollar an Werten (z.B. Spiele etc.) durch solche Kontensperren verloren.<\/p>\n<p>Die polizeilichen Ermittlungen bei der Familie ergaben, dass kein Fall von Kindesmissbrauch vorlag. Die Ermittlungen wurden von der Polizei eingestellt &#8211; aber der Mann, der seinen Namen (wegen der Gefahr der Rufsch\u00e4digung) nicht \u00f6ffentlich genannt wissen m\u00f6chte, hat den Zugriff auf sein Google-Konto nicht wieder erhalten. Die NYT zitiert den Betroffenen mit \"Ich wusste, dass diese Unternehmen uns beobachten und dass die Privatsph\u00e4re nicht das ist, was wir uns erhoffen w\u00fcrden. Aber ich habe nichts Falsches getan.\". Stimmt zwar, aber er hatte und hat immer noch er dicke Probleme.<\/p>\n<p>Kindersch\u00fctzer halten die Zusammenarbeit der Unternehmen f\u00fcr unerl\u00e4sslich, um die wuchernde Online-Verbreitung von Bildern sexuellen Missbrauchs zu bek\u00e4mpfen. Der Eingriff in private Archive wie digitale Fotoalben wird jedoch von Nutzern nicht erwartet, und der obige Fall zeigt die drastischen Folgen f\u00fcr Unschuldige. Die New York Times hat wohl mindestens zwei F\u00e4lle aufgedeckt, bei denen die Nutzer unschuldig waren, was das Ganze in ein d\u00fcsteres Licht r\u00fcckt.<\/p>\n<blockquote><p>Nur mal zum Mitschreiben, eine kleine Beispielrechnung. Es gibt in den USA wohl 30 Millionen Haushalte mit Kindern unter 4 Jahren. Bei einer Fehlerrate von 0,1 % w\u00e4ren das 30.000 Fehlalarme pro Jahr. Ich bin mir nicht sicher, wie viele F\u00e4lle entdeckt werden, bei dem echtes Material von Kindesmissbrauch in die Cloud hochgeladen wird. Die Verwendung von KI-Systemen zur Filterung und Erkennung, ohne einen entsprechenden Kundensupport f\u00fcr Zweifelsf\u00e4lle wird imho zu erheblichen Problemen &#8211; und Dramen f\u00fcr die Betroffenen, die bez\u00fcglich des Vorwurfs des Kindesmissbrauchs unschuldig sind &#8211; f\u00fchren.<\/p><\/blockquote>\n<p>Jon Callas, Technologe bei der Electronic Frontier Foundation, einer Organisation f\u00fcr digitale B\u00fcrgerrechte, bezeichnete die F\u00e4lle, laut NYT, als \"Kanarienv\u00f6gel in dieser speziellen Kohlenmine\".\u00a0\"Es k\u00f6nnte noch Dutzende, Hunderte, Tausende weiterer solcher F\u00e4lle geben\", wird er zitiert. In Anbetracht der Brisanz der Anschuldigungen vermutete Callas, dass die meisten Personen, die zu Unrecht gekennzeichnet wurden, den Vorfall nicht \u00f6ffentlich machen w\u00fcrden.<\/p>\n<h2>Apples CSAM-Scan auf Ger\u00e4ten<\/h2>\n<p>Der Fall zeigt erneut, wie schwierig die Unterscheidung zwischen einem potenziellem Missbrauch von Kindern und einem harmlosen Foto ist. Da diese Materialien als Teil der digitalen Bibliothek der Nutzer oft in die Cloud hochgeladen &#8211; zumindest aber auf dem Ger\u00e4t des Benutzers verbleiben.<\/p>\n<p>Bei Google wird nur der von Android-Ger\u00e4ten auf den Google Online-Speicher hochgeladene Inhalt gescannt. Auch der Versand solchen Materials per E-Mail l\u00e4uft durch Scanner.<\/p>\n<p>Apple geht ja einen gro\u00dfen Schritt weiter, wie ich im Beitrag <a href=\"https:\/\/borncity.com\/blog\/2021\/08\/06\/apple-will-bald-gerte-auf-kinderpornos-scannen\/\">Apple will bald Ger\u00e4te auf Kinderpornos scannen<\/a> berichtete. Apple hat bereits in 2021 begonnen, eine CSAM-Erkennungstechnik zur Erkennung von Kindesmissbrauch auf Ger\u00e4ten wie Macs, iPhones und iPads zu implementieren. Das w\u00e4re zwar im Hinblick auf die Verhinderung der Verbreitung von Kinderpornographie eine gute Sache, wenn es nicht so viele Haken h\u00e4tte.<\/p>\n<p>Die Art der Einf\u00fchrung bzw. die Scans auf den Ger\u00e4ten wurde von Datensch\u00fctzern heftig kritisiert. Der obige Fall h\u00e4tte dazu gef\u00fchrt, dass das Foto des erkrankten Kindes vom CSAM-Filter auf dem iPhone erkannt worden w\u00e4re. K\u00f6nnte selbst f\u00fcr \u00c4rzte ein Problem werden, wenn mit Ger\u00e4ten Fotos von Erkrankungen dokumentiert werden.<\/p>\n<p>Apple hat bereits mit der Einf\u00fchrung der CSAM-Funktion in iOS 15.2 begonnen. <img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/vg07.met.vgwort.de\/na\/3b7fd23f422c4edea3885d8b1719bdbb\" alt=\"\" width=\"1\" height=\"1\" \/>Ich ja bereits im Blog-Beitrag\u00a0<a href=\"https:\/\/borncity.com\/blog\/2021\/12\/14\/ios-15-2-verfgbar\/\">iOS 15.2 verf\u00fcgbar<\/a> darauf hingewiesen, dass der umstrittene Nacktfotofilter (CSAM) jetzt im Betriebssystem integriert wurde und sich aktuell nur f\u00fcr iMessages aktivieren l\u00e4sst. Gleichzeitig wurden von Apple alle Erw\u00e4hnung dieser CSAM-Filter in der Web-Dokumentation des Herstellers sowie Verweise zu dieser Funktion gestrichen (siehe <a href=\"https:\/\/borncity.com\/blog\/2021\/12\/16\/apple-lscht-hinweise-auf-csam-auf-webseite\/\">Apple l\u00f6scht auf seiner Webseite Hinweise auf CSAM-Kinderporno-Scans<\/a>).<\/p>\n<p>Nur als kleiner Hinweis an die \"ich hab ja nichts zu bef\u00fcrchten Fraktion\", die mit \"ich speichere alles online\" gelegentlich hier aufschl\u00e4gt. Vielleicht einfach solche F\u00e4lle im Hinterkopf behalten &#8211; Du bist ganz schnell in wildem Fahrwasser. Ich bin voll dabei, dass echte F\u00e4lle von Kindesmissbrauch aufgekl\u00e4rt und der Strafverfolgung zugef\u00fchrt werden. Mein pers\u00f6nlicher Eindruck ist aber, dass die betreffende Klientel l\u00e4ngst Ma\u00dfnahmen getroffen haben d\u00fcrfte, um eben nicht durch solche Filter aufzufallen und unter dem Radar zu segeln.<\/p>\n<p>Was h\u00e4ngen bleibt, sind oft die oben skizzierten Kollateralsch\u00e4den. Sobald ein Konto gesperrt wird, bekommt man das i.d.R. nicht mehr zur\u00fcck &#8211; einen Kundensupport f\u00fcr Disput-F\u00e4lle gibt es nicht, und oft bekommt der Betroffene noch nicht einmal mit, warum er gesperrt wurde. Ganz ekelig wird es dann noch, wenn Strafverfolger bei den Leuten aufschlage und diese aus allen Wolken fallen. Je nach Gusto der Strafverfolger erfolgt das \"mit gro\u00dfem Besteck und martialischen Aktionen\" &#8211; was im schlimmsten Fall einem Rufmord gleich kommt, wenn die Nachbarschaft oder der Arbeitgeber dies mit bekommt. Sch\u00f6ne neue digitale Welt.<\/p>\n<p><strong>\u00c4hnliche Artikel:<\/strong><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2014\/08\/25\/microsoft-konten-gesperrt-und-nun\/\">Microsoft-Konten gesperrt, und nun?<\/a><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2020\/01\/10\/neues-altes-problem-gesperrte-microsoft-konten\/\">Neues-altes Problem: Gesperrte Microsoft-Konten<\/a><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2020\/07\/14\/achtung-tretmine-microsoft-konto-willkrliche-sperre-bei-online-funktionen\/\">Tretmine Microsoft Konto: Willk\u00fcrliche Sperre bei Online-Funktionen<\/a><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2020\/08\/14\/microsoft-kontensperrungen-und-die-onedrive-nacktfotos\/\">Microsoft-Kontensperrungen und die OneDrive 'Nacktfotos'<\/a><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2020\/08\/21\/werden-microsoft-konten-von-office-ohne-telefonnummer-gesperrt\/\">Werden Microsoft-Konten von Office ohne Telefonnummer gesperrt?<\/a><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2020\/08\/23\/aus-der-gruft-die-microsoft-kontoaktivittsrichtlinie\/\">Aus der Gruft: Die Microsoft-Kontoaktivit\u00e4tsrichtlinie<\/a><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2020\/09\/04\/klage-gegen-willkrliche-microsoft-kontensperre\/\">Klage gegen willk\u00fcrliche Microsoft Kontensperre<\/a><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2020\/09\/07\/neues-vom-office-365-app-reseller-problem-und-gesperrtem-konto\/\">Neues von der Kontensperre bei Microsoft 365-App-Abo vom 'Reseller'<\/a><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2020\/10\/23\/microsoft-kontensperren-das-sagt-der-anwalt\/\">Microsoft Kontensperren: Das sagt der Anwalt \u2026<\/a><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2021\/03\/27\/wieder-neue-flle-von-microsoft-kontensperren\/\">Wieder neue F\u00e4lle von Microsoft Kontensperren?<\/a><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2021\/03\/15\/twitter-dont-mention-memphis-sonst-wurdes-du-gesperrt\/\">Twitter: Don't mention \"Memphis\" \u2013 sonst wurdest Du gesperrt<\/a><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2020\/10\/25\/microsoft-konto-gesperrt-oder-gehackt-das-braucht-microsoft\/\">Microsoft-Konto: Gesperrt oder gehackt, das braucht Microsoft<\/a><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2021\/05\/02\/mann-verklagt-apple-wegen-kontosperre-april-2021\/\">Mann verklagt Apple wegen Kontosperre (April 2021)<\/a><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2022\/06\/05\/microsoft-kontensperre-durch-bug-beim-einlsen-von-microsoft-rewards-points-3-juni-2022\/\">Microsoft Kontensperre durch Bug beim Einl\u00f6sen von Microsoft Rewards Points (3. Juni 2022)<\/a><\/p>\n<p><a href=\"https:\/\/borncity.com\/blog\/2021\/08\/06\/apple-will-bald-gerte-auf-kinderpornos-scannen\/\">Apple will bald Ger\u00e4te auf Kinderpornos scannen<\/a><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2021\/08\/27\/sndenfall-apple-die-privatsphre-und-der-kinderschutz-aber-man-kriegt-selbst-nix-auf-die-reihe\/\">S\u00fcndenfall: Apple, die Privatsph\u00e4re und der Kinderschutz \u2013 aber man kriegt selbst nix auf die Reihe<\/a><br \/>\n<a href=\"https:\/\/borncity.com\/blog\/2021\/12\/16\/apple-lscht-hinweise-auf-csam-auf-webseite\/\">Apple l\u00f6scht auf seiner Webseite Hinweise auf CSAM-Kinderporno-Scans<\/a><\/p>\n","protected":false},"excerpt":{"rendered":"<p>[English]\u00dcber pl\u00f6tzliche Sperren von Online-Konten bei amerikanischen Cloud-Anbietern (Apple, Google, und vor allem Microsoft) habe ich ja hier im Blog h\u00e4ufiger berichtet. Gerade kocht ein Fall in den USA hoch, bei dem Google ein Konto wegen hochgeladener \"Nacktfotos\" sperrte und &hellip; <a href=\"https:\/\/borncity.com\/blog\/2022\/08\/22\/google-kontensperre-und-polizeieinsatz-wegen-baby-foto-fr-den-arzt\/\">Weiterlesen <span class=\"meta-nav\">&rarr;<\/span><\/a><\/p>\n","protected":false},"author":2,"featured_media":0,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[7263,426],"tags":[4293,1171,4328],"class_list":["post-272168","post","type-post","status-publish","format-standard","hentry","category-cloud","category-sicherheit","tag-allgemein","tag-cloud","tag-sicherheit"],"_links":{"self":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/posts\/272168","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/comments?post=272168"}],"version-history":[{"count":0,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/posts\/272168\/revisions"}],"wp:attachment":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/media?parent=272168"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/categories?post=272168"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/tags?post=272168"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}