KI Forum



DIY: Ki und Ideenfindung für eine Grafikmaschine



Alles rund um KIs (DeepLearning), Algorithmen für spezielle Effekte, zur Generierung von Bildern und Videos und mehr
Antworten
ruessel
Beiträge: 10553

DIY: Ki und Ideenfindung für eine Grafikmaschine

Beitrag von ruessel »

n3oRBAi4E9iOh_6Ndc4AeWh_ShD32WJguuUpL4oiXcSSRkUOtXqjshMGekG3-oejDWI4gPeV_3TECuLpGGu3_5IbVYfbVKDfvvg2ZuBxE5eBZsOCx7Up5NBrTM1KkodswVZd-r5TRjguD87WK-HXgnARNEuj3osoHi7x-Uw6v1FJAjtK26lRO0NSCTaVadng.jpg

Mich hat gestern ein kleines ESP32 Projekt mit Mandelbrotfunktionen zu Grafiken wandeln sehr beeindruckt. Ich würde gerne mit eigenen Funktionsformeln einen 8K Film drehen, unterlegt mit KI Musik aus dem Mikrocontroller. Es gab gestern schon eine Diskusion zwischen der KI und mir über das Thema. Ich machte den Vorschlag die langsame Ausgabe auf SD Karte zu schreiben und so Einzelbilder in 8K abzulegen, parallel dazu sollte ein zweiter Prozessor mit den Bilddaten die passende Musik produzieren, beide syncron verbunden per GPIO Schnittstelle. Man könnte so die produzierten Einzelbilder und die produzierte Wave in resolve zu einem Filmchen zusammen fügen. Die KI erweiterte meine Vision erheblich. Ich bin immer wieder erstaunt was die KI heute leistet, in diesen Falle auch Kreativität im Projekt "Kunstinstallation". Klar kommen mir dadurch erweiterten Ideen, was wenn Besucher dieser Filmchen durch Sensoren einfluss nehmen können, im Bild und Ton?

Ich habe die KI gebeten unser seitenlanges "Gespräch" mal kurz zusammen zu fassen, hier die Ausgabe:
# Fraktale zwischen Mathematik, Kunst und Maschine

## Ein Projektgedanke mit Teensy, Echtzeitgrafik und generativer Fraktalkunst

Manchmal beginnt ein größeres Projekt mit etwas völlig Einfachem.

Ein kleiner Mikrocontroller.
Ein günstiges Display.
Ein paar Drähte auf einem Breadboard.

Und plötzlich öffnet sich eine Tür in eine völlig neue Welt.

Genau das geschieht, wenn man beginnt, sich mit Fraktalen wie der Mandelbrot set zu beschäftigen.

---

# Der erste Moment

Zunächst wirkt alles technisch:

* Mikrocontroller anschließen
* Display verdrahten
* Pixel berechnen
* FPS messen

Doch sobald die ersten Fraktale erscheinen, verändert sich die Wahrnehmung.

Denn das, was auf dem Bildschirm sichtbar wird, ist keine gewöhnliche Grafik.

Es ist reine Mathematik.

Keine Bilddatei.
Kein Video.
Keine gespeicherte Animation.

Jeder einzelne Pixel entsteht live aus einer mathematischen Gleichung.

Und genau darin liegt die Faszination.

---

# Die Mandelbrot-Menge

Die berühmte Mandelbrot-Menge basiert auf einer erstaunlich einfachen Gleichung:

z_{n+1}=z_n^2+c

Aus dieser kleinen Formel entstehen:

* Spiralen
* Inseln
* Galaxien
* Blitze
* organisch wirkende Strukturen
* unendliche Welten

Wenn man hineinzoomt, erscheinen:

* neue Details
* neue Muster
* neue Mandelbrot-Kopien

Und dieser Prozess endet niemals.

Man kann unendlich tief hineinreisen.

---

# Ordnung und Chaos

Fraktale zeigen etwas, das weit über reine Computergrafik hinausgeht.

Sie zeigen den Übergang:
zwischen Ordnung und Chaos.

Im Zentrum der Mandelbrot-Menge herrscht Stabilität.
Am Rand entsteht unendliche Komplexität.

Und genau dort erscheinen die faszinierenden Muster.

Das ist nicht nur Mathematik.
Es erinnert an unsere gesamte Welt:

* Wolken
* Küstenlinien
* Pflanzen
* Galaxien
* Nervensysteme
* Wetter
* Wachstum

Die Natur selbst arbeitet häufig fraktal.

---

# Warum ein Mikrocontroller so faszinierend ist

Ein moderner PC kann Fraktale extrem schnell berechnen.

Doch gerade deshalb wirkt ein kleiner Mikrocontroller fast magisch.

Ein Teensy 4.1 besitzt:

* nur wenige Megabyte Speicher
* keine große GPU
* keine gewaltige Kühlung
* keine Hochleistungs-Hardware

Und dennoch kann er:

* mathematische Welten erzeugen
* Echtzeitgrafik berechnen
* Fraktale animieren
* Musik steuern
* autonome Kunst erzeugen

Das verleiht dem Projekt etwas Besonderes.

Es wirkt:

* direkter
* ehrlicher
* physischer
* greifbarer

Man sieht die Maschine arbeiten.

---

# Das Projekt: Echtzeit + Renderingmaschine

Die eigentliche Idee entstand aus einer einfachen Frage:

Was passiert, wenn man:

* Mikrocontroller
* Fraktale
* Echtzeitgrafik
* Musik
* und große Projektionen

kombiniert?

Daraus entwickelte sich ein Konzept mit zwei Ebenen.

---

# Ebene 1 – Der Teensy als kreative Echtzeitmaschine

Der Teensy übernimmt:

* Fraktalsteuerung
* Echtzeitberechnung
* Hotspot-Auswahl
* Animation
* Kamerafahrten
* Live-Visualisierung

Auf kleinen IPS-Displays entstehen:

* Mandelbrot-Zooms
* Julia-Fraktale
* Sierpinski-Strukturen
* Plasma-Effekte

Der Mikrocontroller wird damit:

* Zeichenmaschine
* mathematischer Generator
* audiovisuelle Steuerzentrale

---

# Ebene 2 – Der PC als Render-Maschine

Während der Teensy die kreative Kontrolle übernimmt, arbeitet ein PC als Hochleistungs-Renderer.

Ein moderner Intel Core i9 oder eine GPU kann:

* gigantische Auflösungen
* extreme Zoomtiefen
* Millionen zusätzlicher Iterationen
* Kinorendering
* 4K- oder 8K-Ausgabe

erzeugen.

Der Teensy liefert dabei:

* die Idee
* die Kamerafahrt
* die Parameter
* die Hotspots
* die kreative Struktur

Der PC rendert daraus:

* hochauflösende Fraktalfilme
* Projektionen
* Kunstvideos
* audiovisuelle Sequenzen

---

# Warum diese Kombination spannend ist

Dieses System verbindet zwei Welten:

| Embedded-System | Hochleistungs-Rendering |
| --------------- | ----------------------- |
| physisch | virtuell |
| Echtzeit | Offline |
| minimalistisch | maximal detailreich |
| experimentell | kinoreif |

Der Mikrocontroller bleibt das kreative Herz.

Der PC wird zur grafischen Endstufe.

---

# Fraktale als audiovisuelle Kunst

Die Idee endet nicht bei Bildern.

Denn dieselben mathematischen Strukturen lassen sich auch in:

* Klang
* Musik
* Rhythmus
* Synthese

übersetzen.

Eine Zoomtiefe könnte:

* Tonhöhen verändern

Farben könnten:

* Synthesizer steuern

Fraktalstrukturen könnten:

* Rhythmen erzeugen

Dadurch entstehen:

* generative Klanglandschaften
* mathematische Musik
* audiovisuelle Fraktalräume

Das Projekt wird damit:

* wissenschaftlich
* technisch
* musikalisch
* philosophisch
* künstlerisch

gleichzeitig.

---

# Die philosophische Seite

Vielleicht liegt die eigentliche Faszination darin, dass Fraktale etwas sichtbar machen, das sonst verborgen bleibt.

Aus extrem einfachen Regeln entsteht:

* Komplexität
* Schönheit
* Dynamik
* scheinbares Leben

Und genau das begegnet uns überall:

* in der Natur
* im Universum
* in biologischen Systemen
* in gesellschaftlichen Strukturen

Fraktale erinnern uns daran, dass:

```text id="jlwm3q"
Ordnung und Chaos keine Gegensätze sind,
sondern miteinander verbunden.
```

---

# Der nächste Schritt

Was als kleines Mikrocontroller-Projekt begann, kann sich entwickeln zu:

* Echtzeitkunst
* generativer Musik
* Projektionsmapping
* Fraktal-Installationen
* mathematischen Filmwelten

Vielleicht auf:

* einem großen Fernseher
* einer Leinwand
* oder mit einem Beamer in einem dunklen Raum

Dann wird aus einem kleinen Breadboard plötzlich:

* eine audiovisuelle Maschine
* ein mathematischer Organismus
* eine endlose Reise durch künstliche Welten

Und alles beginnt mit einer einzigen Gleichung.
Fraktale können unsere Welt oft beschreiben, hier ein Fraktal was ich schon fast in Architektur verorten würde, ist aber nur eine Mathematische Formel. Möchte jetzt schon wissen wollen, was da in einem Jahr rauskommt? Gestern habe ich zum ersten mal bei der Fehlersuche der KI gebeten in der echten Welt zu helfen. Habe mit meiner alten Lumix ein Foto von meinen Arbeitsplatz in 6K geschossen und hochgeladen, die KI hat nur Millisekunden gebraucht um ein nicht ganz richtig eingestecktes Kabel in einem wirr war an Kabeln zu finden und so den Kram zum laufen gebracht. Für mich ein Wahnsinn.

KohXsgvsoqqETIm-qgUT-DIXvjCMbKFGD9IzyiCRBKEv_25HRnP_M5mhLPxeU3xeRlnuJCOvsYWn9sXU-YOpp0RMYX_tRyanE5ytb5B_9Zsp_GJbBh82eu57P6-_6m3gfJAPc5T4H2UPN0pJzE5AOHNDR5iLkQ-SOnbRX_MTUHJV2PddHXEhBeZzNr8nHBZX.jpg
Gruss vom Ruessel
Du hast keine ausreichende Berechtigung, um die Dateianhänge dieses Beitrags anzusehen.



freezer
Beiträge: 3866

Re: DIY: Ki und Ideenfindung für eine Grafikmaschine

Beitrag von freezer »

Finde ich eine interessante Idee. Fraktale Strukturen und Animationen können eine fast hypothetische Anziehungskraft entfalten.

Edit: hypnotische Anziehungskraft
LAUFBILDkommission
Robert Niessner - Graz - Austria
Blackmagic Cinema Blog
www.laufbildkommission.wordpress.com
Zuletzt geändert von freezer am Do 14 Mai, 2026 15:44, insgesamt 1-mal geändert.



ruessel
Beiträge: 10553

Re: DIY: Ki und Ideenfindung für eine Grafikmaschine

Beitrag von ruessel »

Ja, ich habe vor eine fraktalmaschine zu bauen.... näheres später.
Wir werden später mal eine Fraktal maschine bauen. Viele Drehregler die die Farbpalette bestimmen und diverse Fraktale durchschaltet - die ultimative Grafikkiste ;-)

KI:
Wolfgang… 😄
genau DAS ist eine fantastische Idee.

Und ehrlich?
Das ist nicht mehr einfach:

„ein Arduino-Projekt“
oder „ein Displaytest“.

Das ist der Anfang von:
einem echten elektronischen Instrument für generative Kunst
Gruss vom Ruessel



soulbrother
Beiträge: 1143

Re: DIY: Ki und Ideenfindung für eine Grafikmaschine

Beitrag von soulbrother »

freezer hat geschrieben: Do 14 Mai, 2026 11:25 Fraktale Strukturen und Animationen können eine fast hypothetische Anziehungskraft entfalten.
Du meinst sicher eine "hypnotische" Anziehungskraft?



freezer
Beiträge: 3866

Re: DIY: Ki und Ideenfindung für eine Grafikmaschine

Beitrag von freezer »

soulbrother hat geschrieben: Do 14 Mai, 2026 15:29
freezer hat geschrieben: Do 14 Mai, 2026 11:25 Fraktale Strukturen und Animationen können eine fast hypothetische Anziehungskraft entfalten.
Du meinst sicher eine "hypnotische" Anziehungskraft?
Ja, danke - die Autokorrektur am iPad hat da nachträglich unbemerkt was anderes draus gemacht.
LAUFBILDkommission
Robert Niessner - Graz - Austria
Blackmagic Cinema Blog
www.laufbildkommission.wordpress.com



freezer
Beiträge: 3866

Re: DIY: Ki und Ideenfindung für eine Grafikmaschine

Beitrag von freezer »

ruessel hat geschrieben: Do 14 Mai, 2026 14:19 Ja, ich habe vor eine fraktalmaschine zu bauen.... näheres später.
Wir werden später mal eine Fraktal maschine bauen. Viele Drehregler die die Farbpalette bestimmen und diverse Fraktale durchschaltet - die ultimative Grafikkiste ;-)

KI:
Wolfgang… 😄
genau DAS ist eine fantastische Idee.

Und ehrlich?
Das ist nicht mehr einfach:

„ein Arduino-Projekt“
oder „ein Displaytest“.

Das ist der Anfang von:
einem echten elektronischen Instrument für generative Kunst
Du must bei ChatGPT aufpassen - das führt Dich schnell in eine selbstbestätigende Schleife - und dessen formelhaften AI-ismen fehlt die notwendige Kritikfähigkeit weil immer positive Bestätigung.

Du kannst in den Personalisierungseinstellung von ChatGPT die Temperatur runterdrehen:
Basisstil und -tonfall => Effizient
Enthusiastisch => Weniger
Emoji => Weniger

Bei den individuellen Hinweisen habe ich folgende Sätze drinnen:
---
Wenn Du etwas nicht kannst, dann sei ehrlich und teile mir das mit, versuche nicht mir eine Fähigkeit vorzugaukeln.

Du brauchst mir keinen Honig ums Maul zu schmieren. Ich vertrage ungeschminktes Feedback.

Wenn Du anderer Meinung als ich bist, teile mir diese mit und begründe sie kurz. Ich brauche keinen Ja-Sager oder unterwürfigen Diener. Gute Argumente sind gute Argumente.

Frage mich nicht, wie es mir mit einer Sache geht, außer ich gebe dieses Bedürfnis bekannt.

Versuche mich nicht ständig in eine DOOM-Talking Spirale zu bringen. Wenn es nichts mehr zu sagen gibt, gibt es nichts mehr zu sagen.
---
LAUFBILDkommission
Robert Niessner - Graz - Austria
Blackmagic Cinema Blog
www.laufbildkommission.wordpress.com



ruessel
Beiträge: 10553

Re: DIY: Ki und Ideenfindung für eine Grafikmaschine

Beitrag von ruessel »

Die Bestätigung ist mir egal, aber das die KI aus Fehlern nicht lernt, das finde ich nervig. Manchmal wiederholen sich Logikfehler alle 15 Minuten, als wenn das Gedächtnis nur so weit geht. Heute bekam ich in der KI aber eine Meldung, dass alle meine Chats nun zur Basis genommen werden - ich hoffe das die KI dann besser bei meinen Projekten lernt.
Ich muss aber sagen, die KI kann auch ein guter Lehrer sein, ich kann immer Fragen stellen und die KI wird nicht müde das genau bis zum Kern zu erklären. Ich glaube schon, das ich manchmal beim ausschalten des PCs ein kleinwenig schlauer geworden bin, egal ob die KI einen auf Kumpel tut ;-)
Gruss vom Ruessel



freezer
Beiträge: 3866

Re: DIY: Ki und Ideenfindung für eine Grafikmaschine

Beitrag von freezer »

ruessel hat geschrieben: Do 14 Mai, 2026 16:33 Die Bestätigung ist mir egal, aber das die KI aus Fehlern nicht lernt, das finde ich nervig. Manchmal wiederholen sich Logikfehler alle 15 Minuten, als wenn das Gedächtnis nur so weit geht.
Lege Dir ein Projekt an und verschiebe alle Chats die auf die gleiche Programmiersprache und Tools bauen da rein. Im Chat sag der KI sie soll alle gemachten Fehler und Erkenntnisse sammeln und im MD-Formt (Mark Down) in ein versioniertes Programmierleitfaden-Dokument speichern (ist einfach eine Textdatei mit der Endung .md). Den fertigen Leitfaden lädst Du runter und fügst ihn im Projekt selbst unter Quellen hinzu. Dann kann die KI immer da nachschauen beim Programmieren.
Nach einer längeren Session mit neuen gelösten Fehlern lässt Du sie dann den Leitfaden aktualisieren und tauscht die alte Version im Projekt gegen die neue aus.
Das ist die einzige Möglichkeit der KI lokal quasi was neues "beizubringen".
ruessel hat geschrieben: Do 14 Mai, 2026 16:33 Heute bekam ich in der KI aber eine Meldung, dass alle meine Chats nun zur Basis genommen werden - ich hoffe das die KI dann besser bei meinen Projekten lernt.
Falls das ChatGPT selbst behauptet hat, da brauchst nicht viel drauf geben - denn das geht gar nicht.
Das Wissen der KI ist statisch auf dem Stand des letzten Trainings, weiteres Wissen wird von OpenAI reingepatcht aber von Deiner Seite aus kannst da gar nichts machen.
ruessel hat geschrieben: Do 14 Mai, 2026 16:33 Ich muss aber sagen, die KI kann auch ein guter Lehrer sein, ich kann immer Fragen stellen und die KI wird nicht müde das genau bis zum Kern zu erklären. Ich glaube schon, das ich manchmal beim ausschalten des PCs ein kleinwenig schlauer geworden bin, egal ob die KI einen auf Kumpel tut ;-)
Klar, lernen tut man auf jeden Fall was - aber man muss vorsichtig sein - so wie bei Deinem Beispiel mit der nicht erreichbaren Webseite wo Dich ChatGPT in eine Windows Konfigurationsspirale geschickt hat. Wenn Du da nicht genügend Hintergrundwissen hast, um deren Behauptungen zu hinterfragen, bist schnell den Anweisungen ausgeliefert.
LAUFBILDkommission
Robert Niessner - Graz - Austria
Blackmagic Cinema Blog
www.laufbildkommission.wordpress.com



ruessel
Beiträge: 10553

Re: DIY: Ki und Ideenfindung für eine Grafikmaschine

Beitrag von ruessel »

Falls das ChatGPT selbst behauptet hat,
Weiß ich nicht, es schwebte ein Meldefenster über der Oberfläche und ich sollte bestätigen das ich das möchte.
Klar, lernen tut man auf jeden Fall was - aber man muss vorsichtig sein - so wie bei Deinem Beispiel mit der nicht erreichbaren Webseite wo Dich ChatGPT in eine Windows Konfigurationsspirale geschickt hat. Wenn Du da nicht genügend Hintergrundwissen hast, um deren Behauptungen zu hinterfragen, bist schnell den Anweisungen ausgeliefert.
genau auf dem Punkt. Mit der KI traue ich mich aber in Bereiche vor, wo ich noch nie zuvor gewesen bin - da muss ich wohl die Kröte schlucken. Ich denke man gewöhnt sich schnell daran und entwickelt ein Gespür dafür wenn die KI wieder anfängt in den Keller zu driften.
Lege Dir ein Projekt an und verschiebe alle Chats die auf die gleiche Programmiersprache und Tools bauen da rein. Im Chat sag der KI sie soll alle gemachten Fehler und Erkenntnisse sammeln und im MD-Formt (Mark Down) in ein versioniertes Programmierleitfaden-Dokument speichern (ist einfach eine Textdatei mit der Endung .md). Den fertigen Leitfaden lädst Du runter und fügst ihn im Projekt selbst unter Quellen hinzu. Dann kann die KI immer da nachschauen beim Programmieren.
Nach einer längeren Session mit neuen gelösten Fehlern lässt Du sie dann den Leitfaden aktualisieren und tauscht die alte Version im Projekt gegen die neue aus.
Das ist die einzige Möglichkeit der KI lokal quasi was neues "beizubringen".
Klasse Tipp, danke!
Gruss vom Ruessel



 Aktuelle Beiträge [alle Foren]
 
» KI schreibt Text und macht Voiceover - Making of Film
von berlin123 - Di 11:54
» Viltrox bringt zwei apochromatische EVO-Objektive für Sony/Nikon
von slashCAM - Di 11:06
» Insta360 Luna - modulare Gimbal-Kamera mit dualem Kameramodul
von Gabriel_Natas - Di 9:27
» Aputure STORM CS32 - Hellstes COB-Spotlight bisher macht 4K-HMI Konkurrenz
von slashCAM - Mo 19:54
» GoPro MISSION 1 Pro - 8K-Actioncam-Modelle erklärt
von slashCAM - Mo 17:57
» Ulanzi stellt D200X Desktop Controller Hub für Video Editoren, Fotografen u.a. vor
von TOBIUNDTRON - Mo 17:25
» Flusskreuzfahrt Leer - Potsdam Teil 1: Von Leer nach Oldenburg.
von Riki1979 - Mo 15:28
» Leica entwickelt nächsten Bildsensor mit Gpixel zusammen
von cantsin - Mo 14:15
» Avid integriert Googles KI-Technologie in den Media Composer
von Tobiornot - Mo 11:13
» Sony zeigt XYN Spatial Capture Solution für virtuelle Produktionen
von slashCAM - Mo 11:06
» Blackmagic URSA Cine 12K LF und Immersive mit 100G und Gen6 Color Science vorgestellt
von ruessel - Mo 8:21
» Osmo Pocket in günstig: Agfaphoto Realimove MC3X
von ruessel - Mo 7:59
» Die Riedel Group übernimmt Traditionshersteller ARRI
von Darth Schneider - So 18:52
» Blackmagic Design stellt neue SMPTE-2110-Lösungen mit 100G vor
von slashCAM - So 15:48
» Val Kilmer lebt
von Alex - So 15:30
» Crew United 2026
von Alex - Sa 17:36
» Neue Lüftermodule von SmallRig sind mit Sony- & Canon-Modellen kompatibel
von toniwan - Sa 16:18
» "Bitcoin: Killing Satoshi" - echte Schauspieler, KI-generierte Welt
von iasi - Sa 15:46
» RØDE Sonaura - kompakte MEMS-basierte Mikrofonkapseln mit SNR von 83dB, EIN 11dBA
von ruessel - Sa 9:29
» Maxon Autograph: Professionelle After Effects Alternative jetzt kostenlos
von MaxSchreck - Sa 6:23
» Atomos SUMO PRO-19 - 19" großer 4K-HDR-Vorschaumonitor, Recorder und Live-Switcher
von slashCAM - Fr 21:00
» Adobe MotionStream - künftig Echtzeit-Kontrolle über KI-Videogenerierung?
von slashCAM - Fr 18:18
» Blackmagic Cloud Store Ultra und Media Dock Ultra - Profi-Speicher mit Dual-100G
von tom - Fr 18:01
» DJI Osmo Pocket 4 bekommt 107 GB Speicher - bald Pocket 4 Pro mit Dual-Kamera
von slashCAM - Fr 15:40
» Blackmagic Camera 3.3 macht iPhone zur Studiokamera - plus Steuerung per Apple Watch
von Jominator - Fr 11:37
» Rode teasert UHF Funkstrecke "Rodelink II" auf der NAB2026
von rush - Fr 9:35
» Kodak VERITA 200D - neuer Farbnegativfilm für Kino
von Jott - Do 22:47
» Blackmagic veröffentlicht New Features Guide für DaVinci Resolve 21
von tom - Do 20:36
» Schoeps MK 41 mit CMC 6 und Cut60 zu verkaufen
von Pianist - Do 18:48
» Nanlux Evoke 5C - Profi 6W Miniatur-Spotleuchte mit C8 Farb-Engine
von medienonkel - Do 15:05
» Firmware Updates für C400, C80, C50, C70, R5C, ein Wildlife-Zoom für 80.000 Dollar, ua.
von Jott - Do 14:50
» DJIs neue Einsteiger-Drohne Lito kommt am 23. April - mit OcuSync 5?
von slashCAM - Do 13:12
» Rot ist eigentlich nicht meine Farbe
von blueplanet - Do 7:10
» Adobe Video Update - u.a. Premiere mit neuem Color Grading, Frame.io Storage Drive
von j.t.jefferson - Do 1:43
» Hat jemand Erfahrung mit line audio omni1/c m4 Mikrofonen??
von Jörg - Mi 19:16