Interactive climbing wall using computer vision and real-time projection mapping

Mostra el registre complet Registre parcial de l'ítem

• dc.contributor.author Panadès i Closes, Oriol
• dc.date.accessioned 2024-10-16T13:14:58Z
• dc.date.available 2024-10-16T13:14:58Z
• dc.date.issued 2024
• dc.description Treball de fi de grau en Enyingeria de Sistemes Audiovisualsca
• dc.description Tutora: Gloria Haro Ortega
• dc.description.abstract Interactive climbing walls are a technology that has gained popularity in recent years along with the rise of indoor climbing. The current limitations in the existing systems have motivated this project to investigate if a general, simple, and robust solution can be achieved using widely available tools. The developed system uses a regular projector, an uncalibrated camera (such as the one in a mobile phone), and a custom-built application to create an interactive climbing wall experience with real-time projection mapping. The implemented solution incorporates computer vision techniques such as image pre-processing, object detection and segmentation, feature matching, au- tomatic homography computation and ranking, as well as deep learning models for human pose estimation. For the application, a custom GUI has been created to facilitate easy operation by the user. The result is an interactive climbing wall that can be setup with minimal equipment, configured in less than 10 minutes, and compatible with existing walls of any shape. Finally, a simple demo of an interactive experience has been created to illustrate what can be achieved with the system and the available data structures.ca
• dc.description.abstract Les parets interactives d’escalada son una tecnologia que ha guanyat popularitat els ultims anys juntament amb l’auge de l’escalada indoor. Les limitacions dels sistemes actuals han motivat aquest projecte per investigar sí es possible aconseguir una solucio general, simple i robusta utilitzant eines ́ ampliament disponibles. El sistema desenvolupat utilitza un projector estandard, una càmera no calibrada ` (com la d’un telefon mòbil), i una aplicaciò o de disseny propi per crear l’expèriencia d’una paret d’escalada interactiva amb ”projection mapping”a temps real. La solucio implementada incorpora técniques de visiò per computador com ara preprocessament d’imatges, deteccio i segmentació d’objectes, ”feature matching”, calcul i rànquing automàtic d’homografies, així com a models de ”deep learning”per l’estimacio de la postura humana. Per l’aplicació, s’ha creat una GUI personalitzada per facilitar-ne el funcionament per l’usuari. El resultat es ́una paret d’escalada interactiva que es pot muntar amb un equip mínim, configurar en menys de 10 minuts, i que es compatible amb parets existents de qualsevol ́forma. Finalment, s’ha creat una demostracio simple d’una experiéncia interactiva per il·lustrar els resultats que es poden aconseguir amb el sistema i les estructures de dades disponibles.
• dc.format.mimetype application/pdf*
• dc.identifier.uri http://hdl.handle.net/10230/61499
• dc.language.iso engca
• dc.rights Llicència CC Reconeixement-NoComercial-SenseObraDerivada 4.0 Internacional (CC BY-NC-ND 4.0)ca
• dc.rights.accessRights info:eu-repo/semantics/openAccessca
• dc.rights.uri https://creativecommons.org/licenses/by-nc-nd/4.0/*
• dc.subject.other Sistemes multimèdiaca
• dc.subject.other Escaladaca
• dc.title Interactive climbing wall using computer vision and real-time projection mappingca
• dc.type info:eu-repo/semantics/bachelorThesisca