Interfaces naturais para realidade virtual: prototipação com tecnologias de visão computacional

Abstract

Este trabalho propõe o desenvolvimento de uma solução para a interação em ambientes virtuais utilizando apenas uma webcam. A realidade virtual tem ganhado espaço em várias áreas no Brasil, mas o alto custo dos dispositivos HMD limita seu uso pessoal. Este projeto visa criar uma solução acessível, permitindo que usuários interajam com ambientes virtuais usando suas mãos e cabeça, sem a necessidade de capacetes especializados. A proposta envolve o desenvolvimento de uma aplicação que colete dados de movimento através de uma câmera e os transmita para aplicações VR. A solução utiliza tecnologias como OpenCV para captura de imagem, MediaPipe para processamento de movimento e OpenVR para comunicação com aplicações VR. O objetivo é proporcionar uma alternativa open-source para interação com ambientes virtuais, ampliando o acesso à realidade virtual e demonstrando o potencial de soluções similares.

This project proposes the development of a solution for interaction in virtual environments using only a webcam. Virtual reality has been gaining traction in various fields in Brazil, but the high cost of HMD devices limits their personal use. This project aims to create an affordable solution, allowing users to interact with virtual environments using their hands and head, without the need for specialized headsets. The proposal involves developing an application that collects motion data through a camera and sends it to VR applications. The solution utilizes technologies such as OpenCV for image capture, MediaPipe for motion processing, and OpenVR for communication with VR applications. The goal is to provide an open-source alternative to traditional interaction in virtual environments, expanding access to virtual reality and demonstrating potential in similar solutions.