equipa sólida e dinâmica
Equipa multidisciplinar de licenciados, mestres e doutores, com conhecimentos complementares em áreas distintas como ciência da computação, engenharia e psicologia.
VIRTUALSIGN:
O nosso principal objetivo é simplificar o processo de aprendizagem e comunicação entre todos os utilizadores da língua gestual, através do hardware e software que desenhamos e desenvolvemos. Esperamos com a implementação deste projeto ajudar aqueles que têm limitações de comunicação, proporcionando um acesso mais equitativo à educação e promovendo a igualdade de oportunidades para todos.
Equipa multidisciplinar de licenciados, mestres e doutores, com conhecimentos complementares em áreas distintas como ciência da computação, engenharia e psicologia.
Trabalhamos com dedicação para eliminar as desigualdades e para derrubar as barreiras à comunicação visando a plena integração na sociedade.
Queremos partilhar o nosso conhecimento consigo, e levar o projeto até aos utilizadores da língua gestual e a todos aqueles que querem saber um pouco mais sobre o VirtualSign.
A aplicação VirtualSign consiste num tradutor bidirecional para a Língua Gestual Portuguesa. Por outras palavras, a aplicação permite traduzir os gestos em língua gestual para texto escrito e traduzir o texto escrito para os seus respetivos gestos em língua gestual. Se desejar saber mais detalhes técnicos do funcionamento do tradutor, pode consultar o artigo Real Time Bidirectional Translator of Portuguese Sign Language.
Gesto para TextoO utilizador realiza gestos em Língua Gestual que são captados pela câmara cinética (Kinect) e pelas luvas de sensores. O Kinect fornece informações sobre o movimento e a posição das mãos e do corpo. As luvas fornecem informações precisas sobre a configuração das mãos/dedos.
Os dados recolhidos são enviados para a aplicação, que por meio de algoritmos avançados de mineração de dados e classificação processa os dados em tempo real, traduzindo os gestos no respetivo texto.
Texto para Gesto
O utilizador escreve o texto que deseja traduzir no seu computador pessoal. O texto é então processado pela aplicação, dando origem a um mapeamento entre palavras/frases e sua representação em Língua Gestual.
Cada gesto tem um identificador único que é passado para um Avatar, o qual interpreta o identificador e executa a animação correspondente. A animação inclui movimento corporal e expressão facial.
Aprender com diversão
O jogo tem três níveis principais, que ocorrem respetivamente num deserto, numa floresta e num cenário futurista. A dificuldade aumenta com o avanço no jogo à medida que passamos da aprendizagem de letras para a aprendizagem de frases em Língua Gestual.
A aprendizagem é inerente ao próprio jogo. À medida que o jogador progride no jogo, ele vai aprender novos gestos em língua gestual começando pelo alfabeto, passando pelas palavras, até ser capaz de reproduzir frases completas.
Foram implementados vários desafios para o jogador, tais como a obtenção de itens para ter acesso a outras zonas, pontos de verificação para avaliar o conhecimento em língua gestual e minijogos divertidos.
O jogador interage com o seu avatar e os objetos nas cenas. Ao jogar com Kinect, o jogador é convidado a realizar o gesto usando o tradutor VirtualSign.
O jogo está preparado para funcionar em computadores pessoais, sendo brevemente exportado para dispositivos móveis, nomeadamente Android, iOS e Windows Phone.
Se gostou deste projeto e quer saber mais detalhes sobre o jogo, pode consultar o artigo Virtual Sign Translation in Serious Games.
use o nosso avatar e traduza texto à sua escolha para Língua Gestual Portuguesa
visite a página Web do jogo e divirta-se a jogar enquanto aprende Língua Gestual Portuguesa
participe na nossa comunidade e diga-nos a sua opinião e sugestões para melhorar o projeto
