Ön pencereleri AI ve Unreal Engine ile Halloween gösterisine çevirmek

Birisi bu Halloween'de evinin ön cephesini tam bir görsel şova dönüştürdü: beş pencereye yayılan, AI ile üretilmiş karakterleri ve odaları gösteren, derinlik efektleriyle canlandırılmış bir prodüksiyon. Sokaktan izleniyor, içeride bir 4K projektör çalışıyor.

Sistem şöyle işliyor: MiniMax H3 modeli (ComfyUI üzerinde) referans fotoğraflardan 100+ video klip üretiyor, 23 farklı tema (Harry Potter, korku sahneleri vs.) her biri 80 saniye döngü halinde. Unreal Engine 5 bu temaları yönetiyor: yan odaların açılması, merkez pencereye karakter gelmesi, zirve anı, sıfırlama. Her sahnede ortaya çıkan efektler beş pencereye yayılıyor.

Derinlik haritaları (Depth Anything) her oda için hesaplanıyor, böylece sis arka plandan ileri geliyor, yıldırım yakındaki nesneleri aydınlatıyor, ışın demetleri havada asılı kalıyor. Unreal'dan çıktı Spout MadMapper BenQ 4K projektöre gidiyor, dışarıdan düzgün görünmesi için aynalı. Telefondan bir uzaktan kumanda ile temalar değiştirilebiliyor.

Bu tür bir kurulum, gerçek zamanlı grafikleri (Unreal), video sentezi (yapay zeka), haritalama (MadMapper) ve derinlik işlemesini birleştiriyor. Teknik olarak karmaşık görünse de, her parça açık kaynak veya erişilebilir araçlarla yapılabilir. Eğer buna benzer bir şey yapmayı düşünüyorsan, ComfyUI'de başlayabilir, Unreal'ın Spout desteğini öğrenebilir, sonra MadMapper'la projektörü kalibre edebilirsin.