So funktioniert’s:
- Eine Webcam (oder dein Handy) macht ein Foto der Szene aus der Perspektive des Projektors.
- Dieses Bild wird stark abgedunkelt, damit Formen und Grenzen besser hervorgehoben werden.
Dann schicke ich das Bild mit einem Prompt wie diesem an Googles Veo:Erstelle ein Projection Mapping. Es soll eine Feuerstelle mit kleinen Monstern zeigen. Nutze die Kisten unbedingt als Begrenzungen.
Veo liefert anschließend ein Video zurück, das die Perspektive und das physische Layout berücksichtigt!
Außerdem habe ich eine kleine Bibliothek gebaut, um alles auszurichten: react-projection-mapping auf GitHub.
Die Ergebnisse waren überraschend gut – sogar mit diesen kleinen 40-Dollar-Android-Projektoren, die man online finden kann.
Ich würde mich freuen, eure Gedanken oder Ideen zur Verbesserung zu hören. Hat sonst noch jemand KI + Projection Mapping ausprobiert?