maicatheus / virtual-cycling-controller

MIT License
115 stars 13 forks source link

Controlador de Ciclismo Virtual

Este é um programa em Python que utiliza visão computacional e entrada de gamepad virtual para criar um controlador de ciclismo virtual. Ele permite que você controle um jogo (GTA V, no meu caso.. Mas se aplica a outros games) pedalando e virando na frente de uma câmera.

giff pedalando

O programa utiliza as seguintes tecnologias:

Como Funciona

O programa funciona da seguinte forma:

  1. Ele captura frames da câmera padrão (geralmente a webcam).
  2. Utiliza o Mediapipe para estimar a pose do corpo do usuário, incluindo pontos de referência-chave, como mãos, ombros e articulações do corpo.
  3. Calcula a distância entre pontos de referência específicos do corpo (por exemplo, pés e quadril) para determinar quando uma pedalada foi efetuada e calcular as rotações por minuto (RPM).
  4. Calcula o ângulo entre a cabeça do usuário e o centro da cintura para controlar a direção.
  5. Com base no RPM calculado e no ângulo de direção, ele simula a entrada do gamepad para controlar um jogo de ciclismo virtual.

Dependências

Antes de executar o código, você precisará instalar as seguintes bibliotecas Python:

Você pode instalar essas dependências usando o pip:


pip install -r requirements.txt