Sistema software de análisis forense basado en el estudio emocional de la voz

Abstract

La computación afectiva tiene como objetivo construir sistemas capaces de reconocer; procesar y/o simular emociones humanas para mejorar la interacción entre el usuario y la computadora. Uno de los enfoques más utilizados para determinar las emociones de un usuario es el análisis de variables fisiológicas; uno de los métodos más efectivos y menos invasivos es el reconocimiento de emociones del habla (System of Emotion Recognition: SER). Teniendo en cuenta que las técnicas de SER se han difundido principalmente en el campo de la identificación de la percepción del usuario final y se han evidenciado pocos enfoques en el campo del análisis forense; en este artículo se propone como contribución el diseño e implementación de un sistema de software de análisis forense basado en el estudio emocional de la voz; que se denominó FOREMAN. Para su desarrollo se utilizaron las fases del patrón iterativo de investigación propuesto por Pratt. El sistema forense propuesto permite tanto la determinación de la fluctuación de emociones en un archivo de audio como la obtención del porcentaje y distribución espacial mediante métodos de agrupamiento de las emociones presentes en los segmentos que componen el archivo de audio. Finalmente; se comprobó la utilidad del sistema mediante el análisis de una pista de audio correspondiente a una audiencia de la Jurisdicción Especial para la Paz en Colombia.

Alternate abstract:

Affective computing aims to create systems capable of recognizing; processing; and simulating human emotions to enhance human-computer interaction. Speech emotion recognition (SER) is a highly effective and non-invasive technique for assessing a user's emotions by analyzing physiological variables. However; despite its widespread use in end-user perception identification; few applications have been developed in the field of forensic analysis. To address this gap; this research proposes a new forensic emotion analysis software system; FOREMAN; based on the emotional study of the voice. The system was developed using the Iterative Research Pattern. FOREMAN determines the fluctuation of emotions in an audio file; as well as the percentage and spatial distribution of emotions present in its segments; using clustering methods. The system's effectiveness is demonstrated by its application to an audio file taken from a Colombian Special Jurisdiction for Peace (JEP) hearing.