Transformer-based temporal modeling for handball action recognition

Abstract

Aquest treball presenta el desenvolupament d’un sistema automàtic per al reconeix ement d’accions en partits d’handbol mitjançant tècniques d’intel·ligència artificial. Perassolir aquest objectiu, s’ha dissenyat un flux complet que inclou la captura de vídeo, elseguiment dels jugadors, l’extracció i etiquetatge automàtic de clips i l’entrenament d’unmodel basat en una xarxa convolucional preentrenada combinada amb una arquitectura Transformer temporal. El sistema es valida sobre un conjunt de dades creat específicamentper aquest projecte, format per més de 1700 clips etiquetats manualment. A través de di versos experiments i ajustos d’hiperparàmetres, s’ha aconseguit una precisió del 76.11%sobre un conjunt de prova separat, demostrant la viabilitat del mètode proposat i establintuna base sòlida per a futures aplicacions analítiques en l’esport.