L’équipe est partie d’un intérêt commun pour la musique et l’accessibilité. Notre artiste a rapidement prototypé la cuisine dans ShapesXR et évalué son confort sur Meta Quest.
SpicyTracks : créer de la musique en réalité mixte
- En vedette
- RV
- Jeux et loisirs
Introduction
Quel était ce projet ?
Un jeu musical en réalité mixte créé au MIT Reality Hack 2025, où les objets d’une cuisine deviennent des instruments pour rendre la création musicale plus ludique et accessible.
Mon rôle
J’ai dirigé le développement XR dans Unity, créé les interactions de saisie, de toucher et de regard, intégré les modèles 3D et les sons de nos artistes, puis ajouté le système d’enregistrement développé par l’autre développeur.
Détails techniques
Développement XR : Unity, C#.
Période
4 jours
Problème
Créer de la musique peut être difficile sans formation musicale ou avec certaines limitations de mobilité.
- Créer ensemble est encore plus difficile lorsque les capacités et l’expérience musicale diffèrent.
Solution
Nous avons créé une cuisine en réalité mixte où les objets du quotidien deviennent des instruments.
- Les interactions familières déclenchent naturellement les sons.
- L’enregistrement et les boucles permettent de créer à plusieurs.
- Une gamme pentatonique permet d’improviser librement tout en conservant un résultat harmonieux.
Processus
J’ai construit la scène Unity, développé les interactions musicales, intégré les modèles et les sons, puis relié la cuisine au système d’enregistrement pour superposer les pistes.
Pendant le hackathon, plusieurs tests nous ont aidés à rendre les interactions plus intuitives, ludiques et confortables.
Défis rencontrés
Des gestes vraiment musicaux
- Relier naturellement des gestes comme "se saisir", "secouer", "toucher" et "regarder" à la production sonore.
Harmoniser le son et l’image
- Créer un univers cohérent entre le style visuel et la conception sonore.
Problèmes liés à la XR et aux appareils
- Résoudre rapidement des problèmes inattendus de compilation et d’appareil avec l’aide des mentors.
Impact
Création musicale accessible
le projet explore comment la XR peut rendre la musique plus intuitive sans formation préalable et avec différentes capacités motrices.