Instituto Politécnico Nacional
Escuela Superior de Cómputo
Interacción Humano Maquina
Proyecto:?
Profesor:
Maldonado Castillo Idalia
Alumnos:
Caballero Chávez Yael Jesús
Domı́nguez Rendón Melissa
Escobedo Guevara Jonathan Gregorio
GRUPO 6BM2
May 2, 2025
1 Investigación
1.1 Notas
(a) Primera plática con una pareja (b) Segunda plática con un hombre
de la tercera edad de la tercera edad
(c) Citas de la plática de la Figura (d) Segunda plática con una pareja
1b de la tercera edad
Figure 1: Imágenes de las anotaciones (Parte 1)
1.2 Resumen
Se llevó a cabo un estudio cualitativo centrado exclusivamente en las entrevistas y observaciones
realizadas dentro del Centro de Rehabilitación e Integración Social (CRIS). El propósito
fue identificar barreras cotidianas, principalmente aquellas relacionadas con la comunicación,
y detectar oportunidades de diseño de soluciones tecnológicas que faciliten la interacción y la
autonomı́a de las personas usuarias.
1
1.3 Descripción General de la Actividad
Dentro del CRIS se realizaron entrevistas informales y sesiones de observación participante
con personas usuarias y con el personal de rehabilitación. Las conversaciones se enfocaron
en entender cómo se comunican durante las terapias, qué estrategias emplean para hacerse
entender y qué tan útiles encuentran las herramientas tecnológicas disponibles. El registro se
hizo mediante notas de campo y extractos de audio (previo consentimiento).
1.4 Tipos de Personas Observadas
• Personas con trastornos del habla derivados de condiciones neurológicas.
• Personas con motricidad reducida que afectan la articulación o el control de los músculos.
• Personas con discapacidad auditiva que, además, experimentan retos al producir sonidos
claros.
• Personas con discapacidad intelectual.
1.5 Descripción de Artefactos Utilizados
• Dispositivos móviles.
• Tablets configuradas con pictogramas y teclados en pantalla de gran tamaño.
• Comunicadores portátiles básicos con botones pre-grabados.
• Adaptaciones simples creadas por cuidadores (soportes, punteros, plantillas impresas).
1.6 Descripción Detallada de la Actividad y Variaciones Observadas
en el CRIS
Durante las sesiones de terapia, se observaron tres patrones frecuentes:
1. Ensayos repetidos: muchas personas necesitan repetir la misma palabra varias veces
hasta que el interlocutor la comprende.
2. Apoyo visual: cuando el habla se vuelve ininteligible, se recurre a gestos, pictogramas
o la escritura en pantalla como puente comunicativo.
3. Intervención del cuidador: en momentos de fatiga o frustración, el cuidador asume el
rol de intérprete.
1.7 Citas de las Entrevistas
“Después del tercer intento ya me canso; prefiero señalar la imagen para que me
entiendan.”
“A veces los pictogramas hacen que reduzcan más su capacidad de hablar.”
“Cuando no logro decirlo claro, mi terapeuta traduce por mı́, pero quisiera poder
hacerlo sola.”
2
1.8 Fotografı́as en la zona de observación
3
2 Persona
Oscar es un adulto de 60 años que vive al cuidado de su hermana y su cuñado quienes cuidan
de el y de su madre de 90 años ,es una persona en silla de ruedas pero ademas cuenta con
una discapacidad mental que le impide comunicarse de manera efectiva, lo cual le complica
interactuar con las personas ,incluidos sus cuidadores pero sobre todo su madre .
Figure 3: Perfil de Leo
3 Propuesta de proyecto
subsectionProblemática
4
Las personas con discapacidad del habla enfrentan barreras significativas para comunicarse
de manera efectiva con su entorno. Estas dificultades pueden deberse a condiciones como dis-
artria, afasia, parálisis cerebral, trastornos neuromotores o secuelas de accidentes cerebrovas-
culares, entre otros. Aunque muchas de estas personas conservan intactas sus capacidades
cognitivas y deseos de comunicarse, la baja claridad o lentitud en su expresión oral puede
generar los siguientes problemas:
• Dificultad para ser comprendidos: El habla pausada, irregular o con pronunciación
distorsionada puede impedir que los interlocutores entiendan con precisión el mensaje.
• Falta de herramientas accesibles de apoyo: Muchos sistemas de comunicación au-
mentativa requieren altos niveles de alfabetización o habilidades motrices que no todos
los usuarios poseen.
• Dependencia constante de terceros: La imposibilidad de expresar ideas de forma
autónoma lleva a depender de cuidadores o familiares para interpretar y transmitir los
mensajes.
• Aislamiento social y frustración: La falta de comunicación efectiva limita la inter-
acción social, afectando negativamente la autoestima, la inclusión y el bienestar emo-
cional.
Ante esta problemática, es fundamental diseñar tecnologı́as accesibles que potencien la
comunicación oral, incluso cuando la voz del usuario no es completamente comprensible para
los demás.
3.1 Descripción de la Solución
La solución propuesta consiste en una aplicación que actúa como traductor de voz lenta o poco
comprensible. El usuario habla de forma natural (aunque con ritmo irregular o pronunciación
afectada) y el sistema procesa la señal mediante un modelo de reconocimiento de voz robusto
como Whisper. A partir del texto resultante, se genera una nueva versión hablada utilizando
un motor de sı́ntesis de voz (TTS), ajustado para producir un tono claro y amigable.
3.2 Objetivo General
Desarrollar una herramienta de apoyo basada en inteligencia artificial que transforme la voz
lenta, pausada o poco clara de una persona con discapacidad del habla en una salida de voz
fluida, clara y comprensible para su entorno, facilitando su inclusión y autonomı́a comunicativa.
3.3 Objetivos Especı́ficos
• Diseñar un sistema capaz de transcribir con alta precisión una señal de voz con pronun-
ciación deteriorada o ritmo lento.
• Implementar un motor de sı́ntesis de voz que permita reproducir el mensaje en una voz
artificial clara y con entonación natural.
• Desarrollar una interfaz accesible que permita al usuario activar la función de traducción
de voz con un mı́nimo de interacción.
• Incorporar retroalimentación visual que muestre el texto interpretado por el sistema antes
de su reproducción.
5
• Validar el sistema con usuarios reales para ajustar la precisión del reconocimiento y la
naturalidad de la voz sintetizada.
