Google Move Mirror: Wenn die KI denkt, man sei ein Kung-Fu-Kämpfer

Move Mirror ist eine Demo für maschinelles Lernen mit Posenet, bei der sich Nutzer vor der Webcam bewegen und Bilder anderer Personen mit ähnlicher Pose angezeigt bekommen - darunter Tänzer und Kung-Fu-Kämpfer. Daraus können Nutzer auch animierte GIFs erstellen.

Artikel veröffentlicht am ,
Move Mirror imitiert mit Bildern die eigene Pose.
Move Mirror imitiert mit Bildern die eigene Pose. (Bild: Google)

Google experimentiert mit verschiedenen KI-Algorithmen auf Basis seines Frameworks Tensorflow. Daraus ist das im Browser laufende Programm Move Mirror entstanden, welches Personen vor einer Webcam aufnimmt, deren Körperhaltung in Echtzeit analysiert und aus einer Bilddatenbank dazu passende Bilder anzeigt - beispielsweise einen Karateka, Tänzer oder eine Gewichtheberin. Eine Bildsequenz kann dabei zu einem GIF zusammengefügt werden.

Magic Mirror nutzt eine von Google erstellte Datenbank von 80.000 Bildern als Referenz. Im Blogpost wird nicht ganz klar, ob diese sich aus zufällig ausgewählten Motiven von Google Images zusammensetzt. Die Software läuft webbasiert im Browser und benötigt laut Google keine Übermittlung der Webcamaufnahmen an Server. Lediglich die Positionsdaten der aus Bildern errechneten Bones müssen übertragen werden. Google erhält also ein Skelett aus verschiedenen Körperteilen, das mit den Daten in der Datenbank abgeglichen wird und sendet das passende Bild zurück an den Client.

Werbung für Posenet

Die kleine Applikation ist im Prinzip ein Beispiel für Googles Machine-Learning-Modell Posenet und soll dieses für Entwickler interessant machen. Posenet ist in Googles Tensorflow integriert und errechnet aus Bildern die Position von Körperteilen. Ein so erstelltes Skelett setzt sich aus zwölf Ankerpunkten am Körper - vier am Torso und jeweils zwei an Armen und Beinen - und fünf Punkten im Gesicht zusammen: für Ohren, Augen und Nase. Ankerpunkte werden mit einem Confidence Score zwischen 0.0 und 1.0 versehen. Dieser gibt an, wie sicher sich Posenet mit dessen akkurater Position ist. Dazu kommen die X- und Y-Koordinaten der Punkte im Bild.

  • Move Mirror (Bild: Google)
  • Posenet errechnet das Skelett. (Bild: Google)
  • Move Mirror (Bild: Google)
Posenet errechnet das Skelett. (Bild: Google)

Die Anwendungsszenarien für solche Algorithmen sind relativ vielseitig, obwohl es momentan eher eine Spielerei als ein produktiv genutztes System ist. So könnte ein Fitnessprogramm die korrekte Körperhaltung in Echtzeit angeben und Verbesserungstipps anbieten. Auch im Game Design könnte das praktisch sein, wenn Animationsteile eines Modells - sogenannte Bones - durch Machine Learning von einer echten Person einfach errechnet werden können, ohne zusätzliche Kleidung anzuziehen.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


Aktuell auf der Startseite von Golem.de
Macbooks
Apple hält 8 GByte RAM weiterhin für ausreichend

Apple verteidigt die Macbooks mit nur 8 GByte RAM: Das reiche für Streaming oder Casual Games aus. Die Realität ist eher anders.

Macbooks: Apple hält 8 GByte RAM weiterhin für ausreichend
Artikel
  1. Snowmobile: Amazon stellt Datentransfer per Lastwagen ein
    Snowmobile
    Amazon stellt Datentransfer per Lastwagen ein

    Noch 2016 waren die großen Snowmobile-LKW ein Highlight für Amazon Web Services. Nun fällt das Projekt Sparmaßnahmen zum Opfer.

  2. Warhorse Studios: Kingdom Come Deliverance 2 wird Ende 2024 fortgesetzt
    Warhorse Studios
    Kingdom Come Deliverance 2 wird Ende 2024 fortgesetzt

    Doppelt so viel Welt, eine Armbrust und Schusswaffen: Heinrich darf in Kingdom Come Deliverance 2 weitere Abenteuer im Mittelalter erleben.

  3. Alex Garlands Civil War: Technisch und erzählerisch ein Meisterwerk
    Alex Garlands Civil War
    Technisch und erzählerisch ein Meisterwerk

    Es ist Science-Fiction, die erschreckend realistisch anmutet. Civil War zeigt die Eskalation in einer gespaltenen Gesellschaft.
    Eine Rezension von Peter Osteried

Du willst dich mit Golem.de beruflich verändern oder weiterbilden?
Zum Stellenmarkt
Zur Akademie
Zum Coaching
  • Schnäppchen, Rabatte und Top-Angebote
    Die besten Deals des Tages
    • Daily Deals • MindStar: Corsair RGB 32GB DDR5-6000 119€ • Samsung Galaxy S23 -37% • MSI OLED Curved 34" UWQHD 175Hz -500€ • Alternate: Deep Cool CH560 Digital Tower-Gehäuse 99,90€ • PS5-Spiele von Sony -75% • Zum Tiefstpreis: AVM Heizkörperregler & limitierte Sennheiser-Kopfhörer [Werbung]
    •  /