Investigadores de UCSF y UC Berkeley han desarrollado una Interfaz Cerebro-Computadora (ICC) que ha permitido a una mujer con parálisis severa debido a un derrame cerebral en el tronco encefálico hablar a través de un avatar digital.

Investigadores de UCSF y UC Berkeley han creado una ICC que permite a una mujer hablar a través de un avatar digital a pesar de su parálisis.

La Inteligencia Artificial juega un papel crucial en la actualidad en el reconocimiento de voz y facial. Estas señales de la cara y el habla son grabadas y sintetizadas por señales cerebrales que permiten el uso drástico de la IA. La tecnología también puede codificar y decodificar estas señales en texto a una tasa aún mayor, lo que hace que el sistema sea aún más fuerte. Estas técnicas son nuevas incluso para que la IA las diagnostique, pero aún así, la IA ha proporcionado resultados fantásticos para el reconocimiento de voz. Estas técnicas de reconocimiento de voz y facial caen dentro de una amplia categoría de Procesamiento del Lenguaje Natural. Los investigadores siguen buscando una IA que pueda permitir el reconocimiento de voz y facial para personas con parálisis.

Investigadores de la UC San Francisco y la UC Berkeley han desarrollado una Interfaz Cerebro-Computadora. También se le llama cerebro inteligente, y es una vía de comunicación directa entre los impulsos eléctricos del cerebro y un dispositivo externo, que probablemente sea un robot o un chatbot de IA. Ha demostrado resultados como que una mujer con parálisis incluso puede hablar con el avatar digital. Estos investigadores tienen como objetivo incorporar un cuerpo de comunicación sólido, que es la forma más natural de comunicarse con otros. La IA ha dado una solución a los pacientes que sufren parálisis o no pueden hablar. Los investigadores implementaron un electrodo en forma de rectángulo en la superficie de la mujer, que es fundamental para el reconocimiento de voz. Estos electrodos implementaron la señal cerebral o impulsos que viajan a lo largo de su cuerpo, lo que facilita su reconocimiento. Los investigadores entrenaron el modelo y mejoraron los algoritmos de Inteligencia Artificial que utiliza el sistema, mejorando la precisión del mismo. Esto también implicó iterar diferentes frases una y otra vez y utilizar un modelo de bolsa de palabras de Procesamiento del Lenguaje Natural en el sistema. Los investigadores también entrenaron el modelo de IA de tal manera que también pueda reconocer y codificar estas palabras en fonemas. Esto mejoró la precisión del sistema y lo hizo más rápido que antes.

Los investigadores desarrollaron un algoritmo para generar su voz utilizando su voz grabada de su boda. El sonido tenía algunos defectos, pero más tarde, los investigadores trabajaron en mejorar la calidad de la voz que se generaba anteriormente. Estos investigadores también desarrollaron un Avatar Digital que ayudó a la mujer en su reconocimiento facial. Los investigadores también crearon un modelo de Aprendizaje Automático que puede fusionar el Avatar con las señales cerebrales de la mujer. Registraron cada movimiento de su mandíbula, labios, lengua, boca y cualquier otro órgano.

Los investigadores aún están trabajando en esta configuración para una conexión inalámbrica entre el cuerpo humano y el software. Esta sería la próxima versión de este modelo. La principal ventaja de este modelo sería el contacto no directo. Se siguen trabajando en diversos algoritmos de Aprendizaje Profundo para este modelo inalámbrico. Se lleva a cabo la prueba de hiperparámetros para mejorar la eficiencia del modelo.