Virtuele Poppenkast

Op poppenkast.bfanger.nl kun met je handen voor de webcam een sokpop besturen.

Dit leuke hobbyproject heb ik gebruikt om me te verdiepen in het gebruik van AI. Maar in plaats van dat de AI een creatieve activiteit vervangt, is het juist aan de bezoeker om met zijn eigen creativiteit een verhaaltje te bedenken of na te spelen.

Het idee ontstond na het bekijken van de Google WebAI Talk, waarin de MediaPipe Hand Landmarker task werd gedemonstreerd.

Qua techniek wordt er gebruikgemaakt van Three.js via r3f (React-Three-Fiber), wat in combinatie met Theatre.js Studio een fijne develop en design omgeving geeft. Het 3D modelleren, de retopologie en rigging heb ik in Blender gedaan, met behulp van een sculpt die ik via een image-to-3D AI-model met ComfyUI had gegenereerd.