Generative KI beweist schon heute außergewöhnliche Fähigkeiten in den Bereichen Bildbearbeitung und Bildgenerierung. Ein großes Thema ist dabei das Einbringen von "festen" Inhalten in die generierten Ergebnisse. Also beispielsweise das eigene Gesicht in ein Bewerbungsfoto oder eine spezifische Produktabbildung in eine generierte Umgebung.
Genau solche Aufgaben soll das ReplaceAnything-Framework des Institut für Intelligentes Computing der Alibaba Group besonders einfach ermöglichen. Hiermit sollte es jedermann möglich sein, in einem Bild sehr einfach Menschen, Kleidung oder auch Hintergründe auszutauschen.
Letztlich basiert das Projekt auf zwei KI-Projekten, die hier "nur" geschickt kombiniert werden. Das eine ist eine Inpainting Anwendung, die es erlaubt nur Teile eines Bildes von einer KI generieren zu lassen. Und das zweite ist ein KI-Objekt-Selektionsmechanismus, der die Auswahl und das Freistellen eines Objektes in einem Bild ermöglicht, ohne dessen Kanten mühsam definieren zu müssen.
Die natürlich bewusst selektierten Demo-Bilder des Projektes sehen recht imposant aus. Zumal die KI es meistens schon sehr gut versteht, Objekte ziemlich natürlich mit anderen Elementen im Bild zu vereinen. So sehen sie selten wie Fremdkörper in einer unpassenden Umgebung aus.
Wie meistens bei solchen KI-Projekten üblich, wird es für Interessierte ein zugehöriges Paper geben - das jedoch noch nicht veröffentlicht wurde. Und dankbarerweise gehört es mittlerweile sogar zum guten Ton, gleich ein Interface für eigene Experimente mitzugeben, wie diese HuggingFace-Demo.
Tatsächlich kann man hier sofort mit eigenen Bildern losexperimentieren, sofern man eine gewissen Wartezeit bei der kostenlosen Rechnerkapazität von HuggingFace in Kauf nehmen kann. Allerdings sollte man grundsätzlich keine sensiblen Bilder bei kostenlosen Online-Diensten nutzen.