Yazar, Halloween için geliştirdiği MonsterHouse adlı interaktif projeksiyonu tanıttı. Proje, çocukları dinleyip huysuz eski bir korsan gemisi sesiyle yanıt veriyor ve ziyaretçiler nezaket gösterdiğinde yumuşuyor. MonsterHouse, NVIDIA Nemotron Voice Agent üzerine kurulu. Sistemde dinleme için Nemotron Speech, beyin görevi için Nemotron 3.5 Bolt E4B 4GB, canlı ses için NVIDIA Magpie TTS Zeroshot ve ağzın konuşması için NVIDIA Audio2Face-3D kullanılıyor. Sistem tek bir iş istasyonunda çalışıyor.
Yazar, evine gelen çocukların eğlenceli ve farklı bir şekilde etkileşime girmesini istediğini anlatıyor. Evin şekerleri dağıtması planlanmış, ancak korkutucu değil daha çok huysuz olması isteniyor. Çözüm olarak garaj kapısına bir ağız verilip ona şikayet etmeyi öğretmek seçilmiş. Yazar, ahşap kapı tahtalarının sivri dudaklara ayrıldığını ve ağzı açıldığında arkasından alevlerin göründüğünü hayal ettiğini belirtiyor.
Karakter, Autodesk Maya'da oluşturulan SkelMesh modeliyle hazırlandı. Yüz ifadesi şekillerini Audio2Face-3D'nin canlandırabilmesi için özel bir animasyon düzeneği kuruldu. Model Unreal Engine'e aktarılarak kapının arkasına sanal ateş ve efektler eklendi. Karakterin gözü, kaşı ve göz kırpması bulunmuyor.
Yazar, NVIDIA'nın Nemotron Voice Agent'ı geliştirdiğini ve dinleme, konuşma ve ses altyapısını hazır aldığını belirtiyor. Projenin zor olması beklenen kısmı, yazarın ifadesiyle, yinelemeli ve kolay bir sürece dönüştü.



