Logo
/// News

Künstliche Intelligenz morpht Bilder besser mit semantischer Interpolation

[10:33 Sa,24.Oktober 2020 [e]  von ]    

Two Minute Papers hat ein weiteres mal eine wichtige aktuelle KI-Entwicklung auf visuell ansprechende Weise für jedermann zusammengefasst. Dieses mal geht es um semantische Interpolation bei der Bilderzeugung, oder im englischen Original: Semantic Interpolation.

Im Gegensatz zum klassischen Morphing besitzt eine trainierte KI (optimalerweise) ein erweitertes Verständnis von der eingegebenen Szene. Wenn sie erkennt, dass es sich um ein Gesicht oder Gebäude handelt, kann sie dadurch auch darauf schließen, dass sich auf der Kamera-abgewandten Seite eines Gesichts wahrscheinlich ein weiteres Ohr befindet. Oder dass hinter einem geschlossenen Mund auch Zunge und Zähne sichtbar werden, wenn sich der Mund öffnet.



GAN_interpolation



Bei der Semantic Interpolation geht es nun eben darum, Bilder nicht nur mit einer aktuellen KI-Architektur relativ willkürlich zu erzeugen (wie bei Gesichtern z.B. mit einfachen GANs / Generative Adversarial Networks). Sondern die Erzeugung der Bilder kann konkreter gesteuert werden. Typischerweise gelingt dies durch die Änderung von Vektoren im sog. Latent Space, jedoch kann wie in einem im Video gezeigten speziellen Fall auch ein weiteres Bild als Style-Input für Eigenschaften genutzt werden.

Man darf sich dies so vorstellen, dass das erste Bild ein "grundsätzliches" Gesicht als Basis stellt und das zweite Bild die Eigenschaften wie Hautfarbe, Brille, Mundöffnung und/oder Kopfdrehung "beiträgt". Das zweite Bild beschreibt also die "semantischen Eigenschaften", bzw. deren gewollten Zustand.

Die Semantic Interpolation geht nun noch eine Schritt weiter und erlaubt - sofern die semantischen Eigenschaften korrekt im Latent Space trainiert wurden - zwischen semantischen Eigenschaften zu wechseln. Also Kopfdrehungen oder Mundöffnung gezielt zu verändern. Oder Brillen hinzuzufügen. Oder Gesichter altern zu lassen oder diese zu verjüngen (De-Aging).

Und hat eine KI einmal gelernt, welche Eigenschaften ein Objekt in welcher Weise verändern, so sind damit deutlich verbesserte Morphings möglich, bei denen nahezu jedes Zwischenbild ein passables Ergebnis darstellt. Auch wenn sich Ausgangs- und Endbild sehr stark unterscheiden.



Link mehr Informationen bei www.youtube.com

  
[11 Leserkommentare] [Kommentar schreiben]   Letzte Kommentare:
Frank Glencairn    16:30 am 26.10.2020
gibt's schon : https://www.facetuneapp.com
Franky3000    16:05 am 26.10.2020
Ich warte auf die Selfie app die jedes Selfie von mir hübscher morpht. Der Schock beim nächsten Tinderdate wird groß sein :D
ruessel    15:58 am 26.10.2020
Den einen, kenne ich.....
[ Alle Kommentare ganz lesen]

  Vorige News lesen Nächste News lesen 
bildNeue HP DreamColor HP Z25xs G3 und Z27xs G3Monitore mit DisplayHDR 600 und 2x USB-C bildAdobe Bridge bekommt Integration in Premiere Pro und Media Encoder


verwandte Newsmeldungen:


[nach oben]

















passende Forenbeiträge zur News:

Archive

2020

November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2019
Dezember - November - Oktober - September - August - Juli - Juni - Mai - April - März - Februar - Januar

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000






































update am 30.November 2020 - 16:09
ist ein Projekt der channelunit GmbH
*Datenschutzhinweis*