¿Una aplicación de traducción de lenguaje de señas se convertirá en realidad?

Imagine un mundo donde las barreras entre los sordos y los oyentes han desaparecido. Un mundo donde las conversaciones fluyen fluidamente entre los que escuchan el sonido y los que no. ¿Podría ese mundo volverse real en el futuro cercano??

En junio, un grupo de estudiantes de marketing de la Escuela de Comunicación de Berghs desarrolló un video conceptual para un producto ficticio llamado Google Gesture. El producto incluía una muñequera portátil y una aplicación móvil que usaba electromiografía para leer los movimientos musculares de una persona sorda haciendo lenguaje de señas. El sistema luego pasó esas señales a la aplicación, que las tradujo a una voz digitalizada y habló por la persona.

Ver el falso video de marketing fue muy emocionante. Tan emocionante, de hecho, que los principales sitios tecnológicos como Mashable, Slashgear y otros anunciaron originalmente el producto como real, y luego tuvieron que volver a contar el reclamo y disculparse por su error. Fue un error extraño, teniendo en cuenta que realmente es un producto de Google llamado Google Gesture Search [Ya no está disponible], que le permite dibujar gestos en la pantalla de su dispositivo móvil para buscar contactos, marcadores y más.

De todos modos, el concepto de los estudiantes de Berghs presentó una idea notable, lo que llevó a la pregunta: ¿podría ser posible crear una aplicación real??

¿Es posible traducir el lenguaje de señas??

Diseccionar el concepto de marketing a nivel técnico revela que la tecnología que utiliza electromiografía (EMG) para “sentido” el lenguaje de señas no es realmente tan descabellado en absoluto. Ya en 2009, los investigadores de la Universidad de Washington pudieron utilizar múltiples sensores EMG para decodificar los movimientos musculares y convertirlos en gestos reales de brazos y manos..

Los investigadores realmente construyeron un completo “biblioteca de reconocimiento de gestos”, identificando qué señales musculares representaban qué gesto. La investigación demuestra que este tipo de tecnología está disponible y lista para implementar en el tipo de aplicación que los estudiantes de Berghs imaginaron..

Entonces, ¿alguien ya ha logrado esto? Si no es así, ¿por qué nadie lo hace y proporciona a los sordos y con discapacidad auditiva la capacidad de comunicarse con cualquier persona en el mundo a través del lenguaje de signos?

El futuro de la tecnología de traducción en tiempo real

La verdad es que alguien está trabajando en una tecnología de traducción de lenguaje de señas en tiempo real.

Hay una compañía llamada SpeechTrans, que ha estado empujando los límites de las tecnologías de traducción 3 Mejores herramientas de traducción basadas en Google Translate 3 Mejores herramientas de traducción basadas en Google Translate en los últimos años. SpeechTrans trabaja con socios tecnológicos para producir algunos de los servicios de traducción de idiomas en tiempo real más notables del mercado actual. Estos son servicios que traducen chat de texto a chat de texto, voz a texto e incluso traducción de idioma de voz a voz en tiempo real a través de aplicaciones de escritorio y teléfonos móviles.

Para explorar si una tecnología de lenguaje de señas podría convertirse en una realidad en el futuro cercano, MakeUseOf se sentó con el CEO de SpeechTrans John Frei y el COO Yan Auerbach para discutir esta nueva tecnología innovadora de traducción Comprenda cualquier idioma con estos 5 sitios web de traducción de idiomas Comprenda cualquier idioma con estos 5 Sitios web de traducción de idiomas La tecnología ha hecho del mundo un lugar más pequeño. Las personas de todas partes de este planeta usan muchas de las mismas herramientas, visitan algunos de los mismos sitios web y se mezclan en varias salas de chat en línea. El ... y qué tan lejos en el futuro podría estar.

Desarrollo de una aplicación de traducción de lenguaje de señas

MUO: ¿Es posible hacer el tipo de traducción de lenguaje de señas a voz que los estudiantes de Berghs retrataron en este video conceptual de Google Gesture??

Juan: Diría que la tecnología está disponible para desarrollar eso. Actualmente estamos trabajando con Microsoft e Intel para explorar algunas de las tecnologías con las que están saliendo, en términos de hardware y software. Visualizamos la capacidad de usar esa tecnología para reconocer el lenguaje de señas y luego convertirla en salida de voz y audio.

MUO: Estás trabajando activamente para desarrollar esa tecnología ahora mismo?

Yan: Entonces, había un cliente que estaba usando nuestro software, y pensó que sería maravilloso si pudiéramos modificarlo para que las personas con discapacidad auditiva puedan usarlo para hacer llamadas telefónicas desde nuestra aplicación, para comunicarse sin necesidad de firmar idioma cuando están en persona, o sin la necesidad de un servicio de tipo TTY para llamadas telefónicas. Desarrollamos ese producto, y con fondos de Microsoft e Intel, lanzamos SpeechTrans para personas con discapacidad auditiva en Windows 8.1, lo que elimina la necesidad de lenguaje de señas.

MUO: Cómo hace el “en persona” aplicación de trabajo?

Yan: Hay un modo de escucha y hay un modo de entrada. Entonces, cuando alguien te está hablando, pones el modo de escucha y escribe todo lo que está diciendo en la pantalla en texto. Luego, cuando respondes, lo escribes y luego dice en voz alta lo que escribes. Con el teléfono, simplemente marca el número de teléfono de cualquier persona, y cuando contesta el teléfono, se convierte en un mensaje instantáneo. Lo que sea que hablen, lo obtienes como un IM. Luego, lo que escriba se dice en voz alta por teléfono. Esa es la primera fase.

Near Future Sign Language Translation

MUO: ¿Qué tecnologías pueden esperar ver las personas en el futuro cercano? ¿Cuál es la siguiente fase??

Juan: Prevemos, para alguien que solo tiene la capacidad de usar el lenguaje de señas, poder hacerlo frente a un dispositivo como un teléfono, PC o computadora portátil. Intel tiene un nuevo sistema de cámara, y Microsoft también lo hace con el Kinect, que reconoce los gestos.

MUO: ¿Cómo es esto mejor que el concepto de brazalete presentado por los estudiantes de Berghs??

Yan: Básicamente, el nuestro va a funcionar de una manera que no requiera que te pongas nada en el brazo. Reconocerá 64 puntos en tu mano. Estamos utilizando la versión beta de la cámara RealSense de Intel. Entonces, no solo podremos reconocer todo el lenguaje de señas y múltiples dialectos diferentes del lenguaje de señas, sino que también podremos reconocer emociones, expresiones faciales y otros pequeños matices y luego convertir eso en palabras habladas.

Eso no requerirá que uses guantes ni nada. Nos estamos centrando en ese mercado específicamente porque solo nos gusta ayudar a las personas en general. No solo queremos ayudar a las personas que quieren hablar en muchos idiomas diferentes, sino que también queremos ayudar a las personas que no pueden hablar en ningún idioma. La tecnología existe, y no hay razón para que su calidad de vida sea diferente a la nuestra..

Juan: Es un concepto factible. Es solo una entrada y salida diferente. Algunas de las conversaciones que hemos tenido con Microsoft sobre algunas de las tecnologías futuras es donde alguien podría implantar un microchip en su cuello, y lee directamente sus patrones de ondas cerebrales. Entonces, si está ayudando a las personas que no pueden comunicarse, realmente veríamos algo así como una implementación de fase tres.

El año pasado, hubo un grupo de estudiantes que salió con un prototipo funcional de un guante que estaba conectado a una computadora. Los gestos que hiciste con el guante serían reconocidos y convertidos al lenguaje de señas. Entonces ya tienen la capacidad con la tecnología actual.

Nuestra visión es que realmente no queremos crear los accesorios como los brazaletes que tiene que ponerse. Debería ser natural y fluido para ellos [las personas que hacen lenguaje de señas] hacerlo frente a su cámara de video. El 90% de lo que dice la gente en la comunicación es en realidad en su lenguaje corporal. Al poder acceder al reconocimiento facial, los gestos y las emociones, también podremos usar esos datos para asegurarnos de que la traducción y lo que intentan transmitir se expresen en la forma correcta.

MUO: ¿Está Intel dentro del rango de 5 años de tener esa tecnología de reconocimiento de lenguaje de señas??

Juan: Intel definitivamente tiene muchos recursos disponibles. Su tecnología y su software están llegando a un ritmo en el que podemos hacer que esto suceda con bastante rapidez..

MUO: ¿Tiene un marco de tiempo para cuando espera llevar esta tecnología al mercado??

Juan: Para el lenguaje de señas, son entre 12 y 18 meses..

MUO: ¿Alguien más tiene algo como esto para la traducción del lenguaje de señas??

Juan: Vi un video de YouTube de IBM haciendo un prototipo donde alguien estaba haciendo lenguaje de señas, pero era una prueba de concepto y solo tenía como tres o cuatro palabras que reconoció. Tenemos más de quinientas mil palabras con las que planeamos implementarlo, por lo que lo llevará a un nivel completamente diferente..

Conclusión

Si bien la visión que los estudiantes de Berghs soñaron podría no convertirse en la aplicación de traducción del lenguaje de señas del futuro, eso no significa que tal concepto no suceda. Lo que demuestra el trabajo realizado en SpeechTran, Intel y Microsoft es que es casi seguro que la traducción al lenguaje de señas se convierta en una tecnología real en unos pocos años. Lo más probable es que no incluya brazaletes engorrosos, sino nada más que una cámara de video especial y una aplicación móvil.

A través de la magia del reconocimiento facial y de gestos, esta aplicación de traducción del lenguaje de señas del futuro promete revolucionar por completo las comunicaciones interpersonales para cientos de miles de personas con discapacidad auditiva. 5 Los mejores recursos para usuarios de dispositivos Mac y Apple con discapacidades 5 Los mejores recursos para usuarios de dispositivos Mac y Apple con discapacidades o personas con problemas de audición en todo el mundo.