Google Move Mirror: Wenn die KI denkt, man sei ein Kung-Fu-Kämpfer

Move Mirror ist eine Demo für maschinelles Lernen mit Posenet, bei der sich Nutzer vor der Webcam bewegen und Bilder anderer Personen mit ähnlicher Pose angezeigt bekommen - darunter Tänzer und Kung-Fu-Kämpfer. Daraus können Nutzer auch animierte GIFs erstellen.

Artikel veröffentlicht am ,
Move Mirror imitiert mit Bildern die eigene Pose.
Move Mirror imitiert mit Bildern die eigene Pose. (Bild: Google)

Google experimentiert mit verschiedenen KI-Algorithmen auf Basis seines Frameworks Tensorflow. Daraus ist das im Browser laufende Programm Move Mirror entstanden, welches Personen vor einer Webcam aufnimmt, deren Körperhaltung in Echtzeit analysiert und aus einer Bilddatenbank dazu passende Bilder anzeigt - beispielsweise einen Karateka, Tänzer oder eine Gewichtheberin. Eine Bildsequenz kann dabei zu einem GIF zusammengefügt werden.

Magic Mirror nutzt eine von Google erstellte Datenbank von 80.000 Bildern als Referenz. Im Blogpost wird nicht ganz klar, ob diese sich aus zufällig ausgewählten Motiven von Google Images zusammensetzt. Die Software läuft webbasiert im Browser und benötigt laut Google keine Übermittlung der Webcamaufnahmen an Server. Lediglich die Positionsdaten der aus Bildern errechneten Bones müssen übertragen werden. Google erhält also ein Skelett aus verschiedenen Körperteilen, das mit den Daten in der Datenbank abgeglichen wird und sendet das passende Bild zurück an den Client.

Werbung für Posenet

Die kleine Applikation ist im Prinzip ein Beispiel für Googles Machine-Learning-Modell Posenet und soll dieses für Entwickler interessant machen. Posenet ist in Googles Tensorflow integriert und errechnet aus Bildern die Position von Körperteilen. Ein so erstelltes Skelett setzt sich aus zwölf Ankerpunkten am Körper - vier am Torso und jeweils zwei an Armen und Beinen - und fünf Punkten im Gesicht zusammen: für Ohren, Augen und Nase. Ankerpunkte werden mit einem Confidence Score zwischen 0.0 und 1.0 versehen. Dieser gibt an, wie sicher sich Posenet mit dessen akkurater Position ist. Dazu kommen die X- und Y-Koordinaten der Punkte im Bild.

  • Move Mirror (Bild: Google)
  • Posenet errechnet das Skelett. (Bild: Google)
  • Move Mirror (Bild: Google)
Posenet errechnet das Skelett. (Bild: Google)

Die Anwendungsszenarien für solche Algorithmen sind relativ vielseitig, obwohl es momentan eher eine Spielerei als ein produktiv genutztes System ist. So könnte ein Fitnessprogramm die korrekte Körperhaltung in Echtzeit angeben und Verbesserungstipps anbieten. Auch im Game Design könnte das praktisch sein, wenn Animationsteile eines Modells - sogenannte Bones - durch Machine Learning von einer echten Person einfach errechnet werden können, ohne zusätzliche Kleidung anzuziehen.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


Aktuell auf der Startseite von Golem.de
Ehemaliger Entwickler
Die Performance von Windows 11 ist "lächerlich schlecht"

Selbst für ehemalige Angestellte von Microsoft sind manche Eigenarten von Windows offenbar unverständlich. Teilweise hilft selbst teure Hardware nicht.

Ehemaliger Entwickler: Die Performance von Windows 11 ist lächerlich schlecht
Artikel
  1. Elektro-Pick-up: Cybertruck nach Waschstraßenbesuch funktionsunfähig
    Elektro-Pick-up
    Cybertruck nach Waschstraßenbesuch funktionsunfähig

    Ein Tesla-Cybertruck-Besitzer hat ein Problem, nachdem er sein Fahrzeug zu einer routinemäßigen Autowäsche gebracht hat.

  2. Bezahlfunktion: Genehmigung für Apples NFC-Zugang soll im Mai kommen
    Bezahlfunktion
    Genehmigung für Apples NFC-Zugang soll im Mai kommen

    Apple muss Konkurrenten die Nutzung der NFC-Schnittstelle im iPhone für Bezahlfunktionen ermöglichen. Die EU soll die Bedingungen des Herstellers in Kürze genehmigen.

  3. EU-Kommission warnt: Pornhub, Stripchat und Xvideos müssen DSA-Auflagen einhalten
    EU-Kommission warnt
    Pornhub, Stripchat und Xvideos müssen DSA-Auflagen einhalten

    In den kommenden Tagen treten für Pornhub, Stripchat und Xvideos neue Auflagen in Kraft. Unter anderem müssen sie Minderjährigen aus der EU den Zugang zu Pornos verwehren.

Du willst dich mit Golem.de beruflich verändern oder weiterbilden?
Zum Stellenmarkt
Zur Akademie
Zum Coaching
  • Schnäppchen, Rabatte und Top-Angebote
    Die besten Deals des Tages
    • Daily Deals • BenQ Mobiuz 27" WQHD/165 Hz 229€ • Spring Sale bei Gamesplanet • MindStar: AMD Ryzen 5 5600 99€ und Ryzen 7 7800X3D 339€ • Samsung Galaxy S23 -37% • Alternate: Patriot Venom 64-GB-Kit DDR5-6000 206,89€ • myMediaMarkt: Sony Bravia KD-75X85L 1.274€ • MSI MEG 342CDE OLED 999€ [Werbung]
    •  /