RECONHECIMENTO DE GESTOS DINÂMICO PARA A INTERAÇÃO HUMANO-ROBÔ

Este trabalho propõe uma modificação na técnica Star RGB, que condensa a informação temporal de um vídeo em apenas uma imagem RGB.
Assim é proposta também uma arquitetura do tipo ensemble utilizando para isso três redes VGG16 pretreinadas, uma para cada imagem, como extrator de características e uma arquitetura totalmente conectada como classificador que recebe a combinação das características extraídas por cada VGG16. Os principais experimentos foram realizados na base de dados GRIT (Gesture Commands for Robot inTeracton), usada para interação homem-robô, e atingiram mais de 97% em todas as métricas, acurácia, precisão, recall e F1-score, superando os resultados originais dos autores em mais de 5% em todas elas.
Um experimento secundário foi realizado na base de dados Montalbano, alcançando 92,4% de acurácia, superando os resultados dos autores em mais de 9%. Isso mostra a contribuição deste trabalho para o reconhecimento de gestos dinâmicos destinados à interação humano-robô.