Marine Capallera
HEIA-FR
Bouvard de Pérolles 80
1700 Fribourg
Switzerland
Ce projet permet de modeler à mains nues, via hand tracking sur Meta Quest 3, une structure faite de "metaballs" — créées, déplacées, redimensionnées et texturées librement dans l'espace. La scène est ensuite analysée pour générer automatiquement un prompt textuel envoyé à un workflow ComfyUI/Stable Diffusion XL, dont l'image résultante s'affiche directement dans l'environnement immersif.
L'expérience est enrichie par un retour haptique multi-zones (bHaptics TactSleeves et TactSuit ...
More informationThis work explores mixed reality as an alternative to fully immersive VR, which can sometimes feel disconnecting, to place students inside the experience of a person with schizophrenia — focusing on auditory hallucinations — while keeping them grounded in their familiar physical surroundings.
The study, based on a pretest–posttest design with 29 students and informed by feedback from hea...
More informationCe travail de Bachelor s'appuie sur des vidéos de danse filmées en 2021, où une danseuse interprète les six émotions de base selon Paul Ekman, filmée sous deux angles (vue frontale et ombre projetée). Le projet combine extraction du mouvement via YOLO11-Pose et classification par machine learning pour identifier automatiquement l'émotion exprimée.
More informationCe projet transforme en application tablette le premier niveau du jeu original, centré sur la gestion du stress et des émotions (MIO), avec une interface ludique reprenant les illustrations du matériel physique. Une fonctionnalité d'audiodescription des cartes a été intégrée, ainsi qu'une plateforme web regroupant les contenus définis avec la mandante.
More informationCe projet de Bachelor explore une approche inédite de "prompt crafting" tangible : les utilisateurs manipulent physiquement des métaballes en réalité virtuelle — chacune dotée de propriétés physiques et sémantiques (taille, texture, mots-clés) — pour composer un prompt sans jamais écrire de texte.
Le système traduit automatiquement la configuration spatiale et les propri&eac...
More informationLes hallucinations vécues lors d'épisodes psychotiques peuvent provoquer des comportements — regard fixe, mouvements brusques de tête, perte du fil de la conversation — souvent perçus comme étranges par l'entourage, contribuant à la stigmatisation des personnes atteintes de schizophrénie. Ce projet recrée certaines de ces hallucinations visuelles en réalité mixte, pour permettre aux étudiant·es de mieux comprendre les difficultés vécues par ces patient·es.
Après un état de l'art sur...
More informationCe projet développe un concept inédit d'interaction : toucher une sphère physique associée à une application pour la lancer, en réalité mixte. Le projet explore, dans une première phase à disposition fixe des sphères, la faisabilité de la reconnaissance, de l'association et du suivi de ces sphères dans l'espace réel.
Développé avec Unity 2022 LTS et le Meta Q...
More informationCe projet fait suite au travail de Master de Samuli Lehtinen, qui avait développé une première simulation permettant de commander un pont roulant en VR, sans volet théorique. Ce travail complète cette base en développant la partie formative de l'application, afin de réduire les risques liés à une mauvaise manipulation de ce type de machine tout en accélérant la formation des opérateurs.
More informationChez Constellium, le déplacement de plaques d'aluminium de plusieurs tonnes via des ponts roulants nécessite une formation solide — mais la formation théorique en salle reste limitée, tandis que laisser un opérateur non formé s'exercer directement présente des risques matériels, financiers et humains. Ce projet développe une application VR immersive, sur Unity/C#, déploy&eacut...
More informationComment un coach sportif pourrait-il montrer directement le mouvement qu'il attend de son athlète, plutôt que de le décrire avec des mots ? Le projet "GIM3D" a développé des algorithmes d'intelligence artificielle (PCA et auto-encodeurs variationnels conditionnels) capables de générer et de modifier des cycles de course à pied en 3D, en temps réel, à partir de paramètre...
More informationLe projet "MeRVeille" explore comment la réalité virtuelle peut recréer une expérience de shopping réaliste — voir et toucher — pour des produits de luxe non disponibles physiquement, notamment horlogers. L'équipe a développé un démonstrateur combinant casque Meta Quest 3, environnement Unity et prototypes de montres imprimés en 3D et lestés, fournis par Ta...
More informationFace au départ à la retraite massif d'opérateurs expérimentés dans l'industrie, le projet "OAK" (Onboarding with Actionable Knowledge) développe un outil pour capturer et transmettre leur savoir-faire de manière non intrusive. La solution combine une base de connaissances basée sur un graphe (Neo4j) et des modèles de langage (LLM) pour structurer des informations issues de textes, i...
More informationCe projet fait évoluer un prototype développé au semestre précédent vers un produit pleinement opérationnel, avec l'ajout d'un backend, d'un système d'authentification sécurisé et de nombreuses fonctionnalités frontend. L'architecture repose sur une base de données PostgreSQL et Keycloak pour la gestion des identités et des rôles.
More informationCe projet de semestre 6 fait évoluer une IHM développée au semestre précédent, permettant de manipuler des mannequins 3D pour visualiser précisément les mouvements du corps humain durant l'entraînement sportif. Il introduit des postures prédéfinies, deux mannequins comparables simultanément, un environnement virtuel et des joints supplémentaires, afin d'aider athl&egrav...
More informationCe projet enrichit l'application VR Papyrus VR pour renforcer l'immersion de l'utilisateur, en ajoutant retours haptiques, retours sonores et manipulation du papyrus à deux mains. Développé avec Unity, le SDK d'interaction de Meta et le SDK bHaptics.
Les tests utilisateurs accueillent favorablement les retours haptiques, mais révèlent des problèmes de reconnaissance des mains lorsque l'utilisateur porte des gants, alt&ea...
More informationNo results
Want to be notified on new events, projects and publications of HumanTech?
Send us an email: elena.mugellini@hefr.ch, we will get back to you shortly.
You can also follow us on social medias: