{"id":238495,"date":"2020-12-06T00:40:00","date_gmt":"2020-12-05T23:40:00","guid":{"rendered":"https:\/\/www.borncity.com\/blog\/?p=238495"},"modified":"2022-01-27T11:51:28","modified_gmt":"2022-01-27T10:51:28","slug":"microsoft-research-puls-und-andere-messungen-per-kamera-und-ai","status":"publish","type":"post","link":"https:\/\/borncity.com\/blog\/2020\/12\/06\/microsoft-research-puls-und-andere-messungen-per-kamera-und-ai\/","title":{"rendered":"Microsoft Research: Puls- und andere Messungen per Kamera und AI"},"content":{"rendered":"<p>Microsoft Research arbeitet daran, Kameras von Smartphones und Notebooks f\u00fcr die Messung bestimmter physiologische Parameter beim Menschen einzusetzen. Puls, Herzfrequenz und weitere Parameter eines Patienten \u00fcber die Kameras verf\u00fcgbarer Ger\u00e4te zu messen, k\u00f6nnte der Telemedizin einen Schub verschaffen.<\/p>\n<p><!--more--><\/p>\n<p><img loading=\"lazy\" decoding=\"async\" alt=\"\" src=\"https:\/\/vg05.met.vgwort.de\/na\/500273e9d93f4b2fa50f8ba32dd1c5c0\" width=\"1\" height=\"1\"\/>Dass man ggf. den Puls mit Hilfe einer App und der Kamera eines Smartphones halbwegs ermitteln kann, habe ich schon vor einigen Jahren, als ich ein Android-B\u00fcchlein f\u00fcr die Zielgruppe 50+ geschrieben habe, gelernt. App installieren und aufrufen, Finger auf die Kamera legen und irgendwann zeigt die App einen Pulswert an. <\/p>\n<p>Allerdings ist es ein Unterschied, einen Wert zu bestimmen und einen stimmenden Wert zu ermitteln. Als ich einige Versuche mit solchen Apps gemacht habe, lie\u00df ich zur Pulsmessung ein Oberarm Blutdruckmessger\u00e4t mit einem Pr\u00fcfsiegel der deutschen Herzgesellschaft mitlaufen. Die Ger\u00e4te messen relativ genau. Dabei fiel auf, dass die Pulsmessungs-Apps in manchen F\u00e4llen sehr genau waren, in anderen F\u00e4llen ziemliche Sch\u00e4tzwerte lieferten. <\/p>\n<p><img decoding=\"async\" title=\"Medizin\" alt=\"Medizin\" src=\"https:\/\/i.imgur.com\/69SlbLU.jpg\"\/><br \/>(Quelle: Pexels\/Pixabay CC0 Lizenz) <\/p>\n<p>Es kam auf die App an, wie man den Finger auf die Kamera des Smartphones legte und wie oft man messen lie\u00df. Die Pulserfassung mittels Finger, Uhr und z\u00e4hlen ist einfacher und genauer, kann aber nicht von jedem durchgef\u00fchrt werden. Die obige Episode fiel mir ein, als ich auf <a href=\"https:\/\/mspoweruser.com\/microsoft-research-develop-technology-to-read-your-pulse-respiration-and-heart-rhythm-using-your-smartphone-camera\/\" target=\"_blank\" rel=\"noopener noreferrer\">diesen Beitrag<\/a> von MSPower-User stie\u00df, der neue Entwicklungen von Microsoft Research aufgreift. <\/p>\n<h2>Neue Microsoft Research-Entwicklungen<\/h2>\n<p>Forscher haben sich in den letzten zehn Jahren auch damit befasst, wie die in vielen Ger\u00e4ten verf\u00fcgbaren Web- oder Smartphone-Kameras, in Kombination mit KI-Algorithmen als wirksame Gesundheitssensoren eingesetzt werden k\u00f6nnen. Dabei l\u00e4sst sich ein breites Feld beackern: Das beginnt mit der Auswertung der von einem K\u00f6rper oder einem K\u00f6rperteil aufgenommenen Fotos, um Ver\u00e4nderungen, die sich \u00fcber die Zeit ergeben, mittels KI zu analysieren und reicht bis zur Auswertung von R\u00f6ntgenaufnahmen f\u00fcr die Krebsdiagnose. Auch die Verwendung von Kameraaufnahmen zur Bestimmung vitaler K\u00f6rperparameter (Puls, Herzfrequenz \u00fcber die Zeit etc.) ist im Fokus der Forscher. Apple hat ja mit der Kardiofunktion seiner Apple Watch, die einen einkanaligen EKG-Monitor nachbilden kann, vor einiger Zeit f\u00fcr Furore gesorgt.<\/p>\n<p>Ein Forscherteam von Microsoft Research, der University of Washington, und von OctoML haben gemeinsam einen videobasierten optischen Vitalparameter-Messansatz f\u00fcr verschiedene Kardiodaten entwickelt. Der Ansatz nutzt allt\u00e4gliche Kameratechnologie (wie Handy- und Webcams mobiler Ger\u00e4te) und ein neuartiges neuronales Netzwerk (Convolutional Attention Network, siehe auch <a href=\"https:\/\/de.wikipedia.org\/wiki\/Convolutional_Neural_Network\" target=\"_blank\" rel=\"noopener noreferrer\">Convolutional Neural Network<\/a>) namens MTTS-CAN, um kardiopulmonale Messungen (Herz-Lungen-Parameter wie Herz- und Atemfrequenz) in Echtzeit auf mobilen Plattformen mit entsprechender Genauigkeit zu erm\u00f6glichen. Der Ansatz wurde am 2. Dezember 2020 von <a href=\"https:\/\/www.microsoft.com\/en-us\/research\/people\/damcduff\/\" target=\"_blank\" rel=\"noopener noreferrer\">Daniel McDuff<\/a> (Microsoft) und <a href=\"https:\/\/web.archive.org\/web\/20210416165426\/https:\/\/homes.cs.washington.edu\/~xliu0\/\" target=\"_blank\" rel=\"noopener noreferrer\">Xin Liu<\/a> , PhD student, University of Washington, im Artikel <a href=\"https:\/\/www.microsoft.com\/en-us\/research\/blog\/utilizing-consumer-cameras-for-contact-free-physiological-measurement-in-telehealth-and-beyond\/?OCID=msr_blog_healthsense_NeurIPS_tw\" target=\"_blank\" rel=\"noopener noreferrer\">Utilizing consumer cameras for contact-free physiological measurement in telehealth and beyond<\/a> vorgestellt.<\/p>\n<p>Der Artikel beschreibt den aktuellen Stand der Forschung auf diesem Gebiet, die eine robuste und skalierbare Messung der Physiologie von Probanden erm\u00f6glicht. Kameras an Alltagsger\u00e4ten k\u00f6nnen dazu verwendet werden, subtile Ver\u00e4nderungen des vom K\u00f6rper reflektierten Lichts zu erkennen, die durch physiologische Prozesse verursacht werden. Algorithmen des maschinellen Lernens werden dann verwendet, um die Kamerabilder zu verarbeiten und die zugrundeliegenden Puls- und Atmungssignale wiederherzustellen, die dann f\u00fcr das Monitoring der Gesundheit und des Wohlbefindens des Probanden verwendet werden k\u00f6nnen.<\/p>\n<p>Zum Hintergrund: Eine Smartphone-Kamera kann reflektiertes Licht einer Person erfassen. Die Ver\u00e4nderungen der Pixelintensit\u00e4ten im Laufe der Zeit k\u00f6nnen dazu verwendet werden, die diesen Ver\u00e4nderungen zugrunde liegenden Quellen (n\u00e4mlich Puls und Atmung einer Person) zu ermitteln. Mit Hilfe optischer Modelle, die auf unserem Wissen \u00fcber diese physiologischen Prozesse basieren, kann ein Video einer Person verarbeitet werden, um deren Pulsfrequenz, Atmung und sogar die Sauerstoffkonzentration im Blut zu bestimmen. <\/p>\n<p>Die Idee dahinter: Physiologische Messungen zug\u00e4nglicher und weniger aufdringlich zu gestalten, um die Belastung bei der Durchf\u00fchrung solcher physiologischen Beurteilungen f\u00fcr Patienten zu verringern und ggf. fr\u00fchzeitig Warnzeichen von Symptomen wie Vorhofflimmern (<a href=\"https:\/\/de.wikipedia.org\/wiki\/Vorhofflimmern\" target=\"_blank\" rel=\"noopener noreferrer\">AFib<\/a>) zu erkennen. Die kamerabasierte physiologische Sensorik samt Bestimmung diverser Parameter bietet zahlreiche M\u00f6glichkeiten zur Anwendungen f\u00fcr Fitness, Wohlbefinden und klinische Anwendungen. F\u00fcr Konsumenten k\u00f6nnte ein solches Messsystem die \u00dcberwachung zu Hause und das Fitnesstracking komfortabler machen. Das Laufband oder das intelligente Fitnessger\u00e4t k\u00f6nnte die Vitalwerte der Person w\u00e4hrend des Laufens kontinuierlich verfolgen, ohne dass diese ein Ger\u00e4t zur Pulsmessung tragen oder die Daten synchronisieren m\u00fcsste. Im klinischen Kontext k\u00f6nnten kamerabasierte Messungen einem Kardiologen erm\u00f6glichen, den Herzzustand eines Patienten \u00fcber einen Videoanruf objektiver zu analysieren. Kontaktsensoren, die f\u00fcr die \u00dcberwachung der Vitalfunktionen auf der Intensivstation erforderlich sind, k\u00f6nnen die Haut von Kleinkindern sch\u00e4digen &#8211; die Fernerkundung k\u00f6nnte eine komfortablere L\u00f6sung darstellen.<\/p>\n<p>Es gibt eine Reihe denkbarer Einsatzszenarien. Im verlinkten Blog-Beitrag gehen die Autoren auf den aktuellen Stand ein und geben auch eine Absch\u00e4tzung der Fehlerrate der so bestimmten Messwerte. Ich habe den Text mal quer gelesen und fand ihn recht spannend.<\/p>\n","protected":false},"excerpt":{"rendered":"<p>Microsoft Research arbeitet daran, Kameras von Smartphones und Notebooks f\u00fcr die Messung bestimmter physiologische Parameter beim Menschen einzusetzen. Puls, Herzfrequenz und weitere Parameter eines Patienten \u00fcber die Kameras verf\u00fcgbarer Ger\u00e4te zu messen, k\u00f6nnte der Telemedizin einen Schub verschaffen.<\/p>\n","protected":false},"author":2,"featured_media":0,"comment_status":"open","ping_status":"","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[7459],"tags":[3836],"class_list":["post-238495","post","type-post","status-publish","format-standard","hentry","category-software","tag-software"],"_links":{"self":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/posts\/238495","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/comments?post=238495"}],"version-history":[{"count":0,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/posts\/238495\/revisions"}],"wp:attachment":[{"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/media?parent=238495"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/categories?post=238495"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/borncity.com\/blog\/wp-json\/wp\/v2\/tags?post=238495"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}