ACAT - Software de Voz de Intel para S. Hawking

Disponible ya en español

"Herramientas de Asistencia Conscientes del Contexto"

Paquete de idioma español añadido. ACAT está ahora disponible en Inglés, Francés y Español.

Cómo?: Se descarga e instala el ACAT: Assistive Context-Aware Toolkit ;hay que tener instalados NET Framework 4.5 y Visual Studio 2012

*Notas y Tips al final

Videos explicativos de Carlos Salas

Estos otros videos muestran algunas de las características del ACAT

incluyendo comunicación, búsquedas en la web, archivos abiertos, etc.

Consiste en capturar los movimientos del músculo de la mejilla y traducirlos en palabras que son dictadas en tiempo real por el programa de síntesis de voz. De este modo, el sistema se compone de tres partes:

    • Un sensor de infrarrojos o cámara que detecta los movimientos faciales,

    • La interfaz que selecciona las letras para formar palabras y

    • El software que predice lo que el usuario está escribiendo.

Este último elemento está basado mayoritariamente en el sistema de predicción SwiftKey.

Tableros ACAT

Atajo

Nombre

Vision Tryout



ACAT Tryout


Phrases


Talk (QWERTY)

Talk (ABC)

Talk (Alt)


Talk (Alt ABC)


App (QWERTY)

App (ABC)

App(Alt)


App (Alt ABC)


ACAT (Config)

Descripción

Prueba de Vision Una utilidad para familiarizarte con el uso de ACAT Vision, que utiliza una cámara web para detectar gestos faciales para activar ACAT. Esta es una utilidad independiente, no destinada a ser utilizada como desencadenante para las aplicaciones ACAT.

Prueba ACAT Esta es una sencilla aplicación para comenzar a familiarizarte con los "escáneres" y cómo funcionan. También le permite probar su interruptor con la interfaz de usuario

La aplicación ACAT FRASES que muestra una lista de frases que se pueden convertir a voz

La aplicación ACAT para HABLAR con un diseño de teclado QWERTY

La aplicación ACAT para HABLAR con un teclado en el que las letras están ordenadas alfabéticamente

La aplicación ACAT para HABLAR con un diseño de teclado alternativo y una secuencia de escaneo optimizada para la entrada de texto

La aplicación para HABLAR (ABC) con un teclado ordenado alfabéticamente y una secuencia de escaneo alternativa optimizada para el ingreso de texto

La aplicación ACAT con todas las funciones con un diseño de teclado QWERTY

La aplicación ACAT con todas las funciones con un diseño de teclado ordenado alfabéticamente

La aplicación ACAT con todas las funciones con un teclado alternativo y una secuencia de escaneo optimizada para la entrada de texto

La aplicación ACAT con todas las funciones con un teclado ordenado alfabéticamente y una secuencia de escaneo alternativa optimizada para la entrada de texto.

Una utilidad para configurar las diversas configuraciones en ACAT. Esta no es una aplicación de asistencia y normalmente será utilizada por los ayudantes para configurar ACAT

Intel acaba de abrir como "fuente abierta" el sistema de voz de Stephen Hawking y su aplicación WinForms .NET 4.5 que puedes probar por ti mismo

En esta foto reciente, se puede ver claramente cómo un sensor detecta los pequeños movimientos en la mejilla derecha de Stephen Hawking. Estos movimientos son traducidos en palabras por el sistema y ha sido adaptado para el público, para que también pueda seguir el movimiento del dedo, detección de infrarrojos y una sutil presión de tecla/ botón.

Vista de la PC Personalizada de Intel para Hawking, con el software ACAT

Un sistema desarrollado por Intel permite al científico transmitir sus pensamientos más rápido y realizar tareas cotidianas en la décima parte de tiempo. Los investigadores en patologías motoras tendrán acceso libre a la plataforma

Tras tres años de trabajo, ingenieros de Intel han creado la nueva silla de ruedas conectada con la que Hawking podrá comunicar su genio

Si no fuera por la tecnología, las ideas del científico más brillante de este tiempo se habrían quedado encerradas en su cabeza. Aquejado de una enfermedad que le tiene prácticamente paralizado, el físico Stephen Hawking podrá desde hoy comunicar sus pensamientos y realizar tareas cotidianas mucho más rápido gracias a la nueva silla que Intel ha desarrollado para él. El prototipo será la base para una plataforma abierta a todos los que investigan en hacer la vida mejor a los afectados por tetraplejias y patologías motoras de origen neurológico.

Hawking ha estrenado su nueva silla en un acto celebrado en la mañana del martes en Londres. El físico británico, que arrastra una esclerosis lateral amiotrófica (ELA) desde sus tiempos universitarios, podrá desde hoy transmitir sus pensamientos con mayor rapidez y realizar algo tan simple pero esencial para él como navegar por internet en la décima parte de tiempo que le permitía su anterior silla.

Tanto la vieja, con la que Hawking se ha movido y comunicado en las últimas dos décadas, como la nueva son obra de ingenieros de Intel. Pero en esto de la tecnología, el tiempo, ese fenómeno que tanto ha interesado al genial físico, pasa demasiado deprisa y su silla de siempre se había quedado anticuada y era incapaz de aprovechar todos los avances que se han producido en los últimos años.

Con la nueva silla, por ejemplo, el sensor que actualmente tiene en la mejilla es detectado por un conmutador infrarrojo montado en sus gafas, lo que le permite seleccionar caracteres en su ordenador. La integración de la tecnología de software lingüístico de la compañía británica SwiftKey, una app de texto predictivo, ha mejorado la capacidad del sistema para aprender del profesor, prediciendo sus próximos caracteres y palabras.

Durante dos años, ingenieros de Swiftkey han trabajado en un modelo de lenguaje personalizado para Hawking. En esencia el sistema es similar al de la aplicación para móviles. Aprende de lo que uno ya ha escrito en correos, mensajes o post en redes sociales para anticipar las palabras. En el caso del físico británico, el aprendizaje se hizo incluso con textos que el físico no ha publicado.

Según una nota de Intel, con este sistema, Hawking solo tiene que escribir menos del 20% del total de los caracteres comunicados. Hasta ahora, por ejemplo, para realizar una búsqueda Web, el profesor Hawking tenía que seguir procesos arduos, como cerrar su ventana de comunicación, desplazar el puntero para ejecutar su navegador, moverlo de nuevo a la barra de búsqueda y, por último, escribir los términos de la búsqueda. El nuevo sistema automatiza todos estos pasos.

"La medicina no ha sido capaz de curarme, por lo que dependo de la tecnología para poder comunicarme y para vivir," decía el profesor Hawking en la capital londinense ya instalado en su nueva silla.

Hawking y la responsable del diseño de la silla ACAT. Intel

La plataforma ha sido bautizada por Intel como ACAT (por sus siglas en inglés de Herramientas de Asistencia Conscientes del Contexto). En su diseño ha participado un equipo multidisciplinar de investigadores de Intel Labs durante tres años y lo ha hecho codo con codo junto a Hawking.

"Durante décadas, el profesor Hawking se ha valido de la tecnología para poder comunicarse con el mundo. Sin embargo, y, por establecer una analogía, su antiguo sistema era como intentar utilizar aplicaciones y páginas web modernas sin disponer de teclado ni ratón," apunta Wen-Hann Wang, vicepresidente de Intel y director ejecutivo de Intel Labs. "Juntos, hemos creado una experiencia de comunicación superior a todos los niveles, que contribuye a mantener al profesor independiente en su vida diaria y que puede llegar a aumentar la independencia de otros afectados", añadía.

Plataforma abierta a todos

El físico británico es el primero en contar con ACAT, pero la intención de Intel es que la plataforma se abra en enero a todos los investigadores y tecnólogos que trabajan en el campo de la discapacidad.

Más de 3 millones de personas en todo el planeta se ven afectados por lesiones y enfermedades motoras de origen neurológico. Estas patologías afectan a las actividades musculares voluntarias, como la capacidad para hablar, caminar, tragar y realizar todo tipo de movimientos corporales.

Los ingenieros han trabajado tres años en la nueva silla de ruedas conectada

Desde el año que viene, el software de ACAT estará disponible para que los investigadores puedan crear soluciones personalizadas para interacciones y comunicación mediante el tacto, parpadeos, movimientos de cejas y otros gestos.

Aunque la discapacidad no siempre ha estado en la lista de prioridades de muchas empresas tecnológicas, la responsable principal de Intel Labs en el diseño de ACAT, Lama Nachman, recordó durante la presentación de la creación que permitirá al discapacitado más ilustre comunicar más y mejor que "el ámbito de las tecnologías para discapacitados es, con frecuencia, un terreno de prueba para las tecnologías del futuro".

*Notas

    1. ACAT está disponible ya en Español

    2. ACAT no incluye la voz del profesor Stephen Hawking. Es compatible con la API de voz de Microsoft (SAPI) fuera de la caja y utiliza la voz de forma predeterminada en el equipo de destino. (Consulte la guía de solución de problemas sobre cómo puede cambiar la voz por defecto). ACAT se puede ampliar fácilmente para soportar otros sistemas de síntesis de voz.

    3. Actualmente, sólo ACAT es de código abierto. Tenemos la intención de abrir el código fuente de sensor de visión, así como todos los otros sensores, pero por ahora, sólo podemos usar la versión binaria del código de Visión para activar el sistema.

  1. El software de Vision ACAT es de 64 bits y no se ejecutará en sistemas Windows de 32 bits. No obstante, la aplicación de la ACAT es de 32 bits y se ejecutará en ambos sistemas de 32 y 64 bits.

Consejos para la aplicación ACAT Visión

ACAT Vision utiliza la cámara web para realizar un seguimiento de la cara del usuario y detectar gestos faciales (contracción de mejilla) para activar la interfaz de usuario.

Aquí algunos consejos.

    1. Antes de iniciar la aplicación de la visión, asegúrese de que la cara se sitúa entre 1-2 pies de distancia de la cámara

    2. Durante la calibración, trate de mantenerse lo más quieto posible. No hacer ningún movimiento de cabeza o facial. La calibración no debe tomar más de 5 seg

    3. La detección de rostro funciona bien en la mayoría de las condiciones de iluminación, pero si la habitación es demasiado oscura o sí la luz (artificial / solar) incide directamente en la cara, entonces la detección no funciona bien. Asegúrese de que la cara se ilumina razonablemente

    4. Con la ventana de visión enfocada, presione la tecla "R" para reiniciar la detección de rostros. Útil si hubo movimiento de la cabeza y las regiones faciales y ya no está en el lugar correcto.

    5. Presione Ctrl-Alt-Shift-W (en ese orden) en cualquier momento para ocultar o mostrar la ventana de Visión

  1. Al salir de la App ACAT, se cierra la aplicación de la visión también. Con la ventana de visión enfocada, puede pulsar la tecla ESC para salir de la aplicación de la visión de forma manual.