LipNet, el software que lee los labios

Un equipo de la Universidad de Oxford ha desarrollado un software que permitiría a las computadoras «leer los labios».

LipNet es el software que, apoyado por DeepMind de Alphabet, ha superado todas las pruebas de lectura de labios en un 13.8%. El software que había logrado el mayor porcentaje de aciertos a la fecha en este ámbito, tan solo había alcanzado el 79.6% mientras que LipNet ya alcanza el 93.4%. En comparación, el ojo humano logra comprender aproximadamente un 52.3% de las palabras en la misma prueba.

Este logro se ha alcanzado gracias a un acercamiento menos refinado de la tarea, el equipo en Oxford expandió su punto focal de las palabras individuales a construcciones mayores a nivel de oraciones. Esto es que el software se volvió más efectivo al irse acercando a la forma en la que trabaja el cerebro humano. Al tomar el video de una persona hablando, sus capacidades predictivas le permiten incluir la conversación en un contexto mayor para un mejor entendimiento.

El software aún no ha sido utilizado más allá de la realización de pruebas y requiere de mayor desarrollo. Lo que es más importante, este nivel de certeza abre nuevas posibilidades tanto para quienes dependen del lenguaje de señas, como para otro tipo de aplicaciones de comunicación.