PIP-PRoS: Plataforma Robótica Sensorizada
O jogo Pong como ferramenta para o aprendizado de Visão Computacional e Robótica
Objetivos
A Plataforma Robótica Sensorizada (PRoS) é um Projeto de Inovação Pedagógica (PIP 2022) do Instituto Superior Técnico que combina o ensino de Visão Computacional e Robótica no desenvolvimento do conhecido videojogo Pong.
O setup desenvolvido pode servir para o teste de diversas funcionalidades e pode ser inserido em trabalhos de laboratório de Unidades Curriculares em ambas as áreas.
As diferentes componentes do jogo são disponibilizadas aos estudantes do IST, e ao público em geral, a partir desta página por forma a poderem ser replicadas livremente.
O projeto possui muito espaço para desenvolver melhorias e novas ideias! A sua contribuição é muito bem-vinda! Aqui temos alguns tópicos de interesse
Que tipos de algoritmos podemos usar para aumentar a eficácia do bloqueio da bola? Algoritmos genéticos?
Como podemos deixar o lançamento mais rápido?
Como prever com mais eficiência e precisão a posição final da bola?
Dentre outros!
Basta conversar com algum dos membros da equipa!
Exemplos de funcionamento
Abaixo estão disponíveis alguns vídeos que exemplificam o funcionamento do projeto em duas diversas componentes! O lançamento e bloqueio da bola pela integração entre software e hardware, a detecção da bola e previsão de movimento, feitas usando visão computacional, dentre outras!
Etapas do projeto
A calibração é uma etapa muito importante para diversas aplicações de visão computacional!
A partir da posição estimada da bola, o braço robótico Niryo Ned2 é controlado para realizar o lançamento por meio de uma interface interativa!
Bloqueio da bola
Feita a previsão da posição estimada, agora já é possível realizar o bloqueio da bola por meio do controlo de um atuador linear.
