0% encontró este documento útil (0 votos)
34 vistas2 páginas

Interfaz ELA: Teclado y Mouse Virtuales

El documento describe un sistema de comunicación asistida para pacientes con esclerosis lateral amiotrófica (ELA) que incluye un teclado virtual, simulación de ratón, reproducción de audio y control de dispositivos externos a través de Bluetooth. El sistema utiliza las librerías Tkinter, Espeak, PyBluez y Autopy de Python. Las pruebas con 20 voluntarios mostraron que el 85% calificó el sistema como excelente y el 15% como muy bueno, por lo que se concluyó que el sistema puede ayudar de manera segura y confiable a los pacientes
Derechos de autor
© © All Rights Reserved
Nos tomamos en serio los derechos de los contenidos. Si sospechas que se trata de tu contenido, reclámalo aquí.
Formatos disponibles
Descarga como PDF, TXT o lee en línea desde Scribd
0% encontró este documento útil (0 votos)
34 vistas2 páginas

Interfaz ELA: Teclado y Mouse Virtuales

El documento describe un sistema de comunicación asistida para pacientes con esclerosis lateral amiotrófica (ELA) que incluye un teclado virtual, simulación de ratón, reproducción de audio y control de dispositivos externos a través de Bluetooth. El sistema utiliza las librerías Tkinter, Espeak, PyBluez y Autopy de Python. Las pruebas con 20 voluntarios mostraron que el 85% calificó el sistema como excelente y el 15% como muy bueno, por lo que se concluyó que el sistema puede ayudar de manera segura y confiable a los pacientes
Derechos de autor
© © All Rights Reserved
Nos tomamos en serio los derechos de los contenidos. Si sospechas que se trata de tu contenido, reclámalo aquí.
Formatos disponibles
Descarga como PDF, TXT o lee en línea desde Scribd

Traducido del inglés al español - [Link].

com

La interfaz gráfica tiene dos procesos: simulación de estado de la luz, abra o cierre la puerta, active o desactive la alarma del
teclado virtual y sistema de mouse. paciente.

• Simulación de teclado virtual


En el teclado virtual desarrollado en el software Python
utilizando la librería Tkinter, tenemos una ventana principal que
muestra las palabras y letras más utilizadas en inglés que permite
escribir rápidamente. Para escuchar el mensaje escrito por el
paciente, puede elegir entre la voz de hombre o la voz de mujer.
Además, se presentan otras funciones importantes como:
• Subventana con mensajes predefinidos para seleccionar y
escuchar las necesidades básicas del paciente.
• Subventana que permite la conexión Bluetooth y
visualizar las diferentes funciones de control domótico.
• También facilita el acceso a una subventana para
escuchar música o ver videos.

También existen otras funciones básicas como: borrar


todo, borrar cada letra, subir y bajar la fila y aumentar o disminuir
el tiempo que tarda el cursor en moverse de una letra a otra, como Fig. 8. Subventana para controlar dispositivos externos.

se muestra en la Fig.7.
III. RESULTADOS
• Sistema de ratón
El sistema fue desarrollado usando Tkinter, la interfaz gráfica
Para controlar el mouse, mover el teclado virtual y simular el
de Python. También se instalaron varias librerías como: 1) Espeak
clic izquierdo del mouse cuando el paciente realiza un movimiento
para convertir textos en audio (sintetizador de voz), 2) PyBlueZ
voluntario del párpado, se instaló la biblioteca Autopy. Esta biblioteca
para poder usar Bluetooth desde la tarjeta RPI 3 y controlar
es un kit de herramientas de automatización de GUI simple y
dispositivos externos (control domótico), 3) Autopy es un conjunto
multiplataforma para Python. Incluye funciones para controlar el
de herramientas GUI y multiplataforma para Python que incluye
teclado y el mouse, encontrar colores y mapas de bits en la pantalla y
funciones para controlar el mouse. Estas bibliotecas eran
mostrar alertas, todo de una manera multiplataforma, eficiente y
fundamentales para el correcto funcionamiento del sistema.
simple.

Para interpretar el funcionamiento del sistema, se realizó


una prueba a personas sin ELA, teniendo en cuenta los
diferentes brillos de luz. El sistema se probó con 20 personas
voluntarias y el resultado se verificó según el nivel de calidad
del sistema, como se muestra en la Fig.9.

Fig. 7. Interfaz gráfica del paciente.

3) Control de dispositivos externos


En el último proceso mostrado en la Fig. 8, el sintetizador de
voz configurado e instalado con las bibliotecas necesarias, reproduce
los mensajes escritos y permite al paciente escuchar su música favorita. Fig. 9. Datos recopilados de 20 personas que utilizaron el sistema.
La tarjeta RPI 3 está vinculada a una placa de microcontrolador
externo, mediante comunicación Bluetooth. La placa del Tras aplicar la prueba funcional, obtuvimos resultados
microcontrolador recibe comandos del RPI 3 para manipular el satisfactorios con el sensor de proximidad y con el uso de la webcam.

221
Además, de 20 personas que utilizaron el sistema, el 85% (17 personas) El prototipo desarrollado en software y hardware libre (Open
calificó como excelente, mientras que el 15% (3 personas) calificó como Source), brinda la posibilidad de agregar más necesidades al futuro
muy bueno. Es por eso que el sistema fue altamente aceptado y se requerido por el paciente, estos requisitos serán cumplidos sin
definió como un dispositivo seguro y confiable para ayudar con éxito a modificar el código actual en su totalidad, con el fin de ayudar a las
los pacientes con la enfermedad de esclerosis lateral amiotrófica (ELA). personas de bajos ingresos económicos, quienes por su situación
monetaria tienen dificultades para acceder a estos dispositivos.
Finalmente, presentamos el prototipo del sistema para ayudar al
paciente con ELA que se muestra en la Fig. 10. Allí la pantalla táctil de RECONOCIMIENTO
10.1 "(pulgadas) que permite visualizar el teclado virtual y el cursor Estoy especialmente agradecido con mis mentores, quienes trabajaron
del mouse. El tamaño y la calidad de la imagen mostrada activamente para brindarme los conocimientos necesarios para el desarrollo
de esta investigación y el apoyo técnico para probar en gran medida el
manuscrito.

REFERENCIAS
H. Mitsumoto, DA Chad, EK Pioro, "Esclerosis lateral amiotrófica"
Filadelfia, Pensilvania: FA Davis Co, 1998.
FUNDELA, «Fundación Española para el Fomento de la Investigación de la
Esclerosis Lateral Amiotrófica.,» Información General, 2004 - 2014. [Online].
Disponible: [Link] [Último acceso:
28 de marzo de 2017].
Instituto Nacional de Salud, «ELA», 20 12 2016. [En línea]. Disponible: https://
[Link]/trastornos/esclerosis_lateral_amiotrofica.ht
metro. [Último acceso: 28 de marzo de 2017].

LA RAZON, «ELA es una patologia sin cura médica pero se puede


tratar.,» 20 12 2015. [Online]. Disponible:
[Link]
puede-tratar-AF4531471/. [Último acceso: 12 de mayo de 2017].
J. Garry y K. Casey, “Impacto psicosocial de la computadora de seguimiento
ocular Tobii C12 en el entorno de la UCI”, Crit. Care Med., Vol. 41, no. 12,
2013.
A. Larson, J. Herrera, K. George, A. Matthews, "Dispositivo de comunicación
electrónica basado en electrooculografía para personas con ELA",
Simposio de aplicaciones de sensores (SAS), IEEE, págs. 1-4, abril de 2017.
S. Collado-vázques y JM Carrillo, "La esclerosis lateral amiotrófica en la
literatura, el cine y la televisión", Rev. Neurol., Vol. 59 (1): 37-
CONCLUSIONES 44,2014
La detección del movimiento del ojo a través del sensor de [8] R. ÁLVAREZ, «El software que usa Stephen Hawking para comunicarse ya está
proximidad y la captura del rostro por la webcam se realizaron disponible para todos», 18 de agosto de 2015. [Online]. Disponible: https://
[Link]/investigacion/el-software-que-usa-stephenhawking-para-
de manera satisfactoria, garantizando la confianza para utilizar
hablar-ya-esta-disponible-para-todos. [Último acceso: 02 de abril de 2017].
el sistema con cualquiera de las 2 opciones según el
requerimiento del paciente. [9] T. Weber. (2014, marzo). “OnScreenKeys”. [En línea]. Disponible:
La interfaz gráfica para el paciente con ELA, es un sistema de [Link].
comunicación alternativo y novedoso, que permite escribir mensajes y [10] Tecno accesible (2015, Jul) “IRISCOMhttp”. [En línea].

acceder a las diferentes funciones del barrido por columnas que realiza Disponible: //[Link]/content/iriscom-qg3
[11] Tobii C12. (2013, enero). “Dispositivo AAC para la independencia”. [En línea].
el cursor del mouse en un tiempo determinado, así como controlar el
Disponible: [Link].
cursor del mouse. con el movimiento de la cabeza, estas opciones de
[12] G. Ricardo. (2013, enero). “Retadis: tecnología que mejora la vida
comunicación permiten al paciente expresar todos sus sentimientos y de las personas con discapacidad”. [En línea]. Disponible:
deseos a las personas que lo rodean. [Link]/retadis-tecnologia-alcance-todos/.
El sistema domótico brinda comodidad, seguridad y accesibilidad [13] F. Rosado, I. Rumbo, F. Daza, H. Mercado, D. Mier, “Sistema de comunicación basado
para personas con discapacidades motoras graves, por ello, los en código Morse enfocado en pacientes con esclerosis lateral amiotrófica”
Procesamiento de señales, imágenes y visión artificial (STSIVA), IEEE, páginas 1-3,
pacientes con Esclerosis Lateral Amiotrófica, tienen la posibilidad de
noviembre de 2016.
utilizar esta herramienta para realizar las actividades diarias de manera
[14] Python-Tkinter. (2016, noviembre). “Introducción a la GUI Python”. [En línea].
sencilla, generando bienestar con ellos mismos y sobre todo no Disponible: [Link]
dependiendo enteramente de las personas que le asisten. [15] C. Woodford, "Webcams", 15 de septiembre de 2015. [En línea]. Disponible:
Los resultados finales, obtenidos muestran que el funcionamiento [Link]
del sensor de proximidad y la webcam utilizados durante el día son [16] W. Chareonsuk, S. Kanhaun, K. Khawkam, D. Wongsawang, "Ratón de cara y ojos
más eficientes, mientras que los resultados de la prueba aplicada para pacientes con ELA", Conferencia de proyectos de estudiantes internacionales,
IEEE, páginas 1-3, 2016.
durante la noche, afecta el funcionamiento normal del sistema en un
[17] Y. Wang, A. Su, T. Han, cap. Lin, L. Hsu, "Enfoques de sistemas de rehabilitación
10%, es decir que el sistema debe usarse en lugares con suficiente basados en EMG para pacientes con ELA en diferentes etapas",IEEE, págs. 1-4,
brillo para obtener mejores resultados. 2015

222

También podría gustarte