Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio...
-
Upload
pablo-paulino -
Category
Documents
-
view
8 -
download
0
Transcript of Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio...
![Page 1: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/1.jpg)
Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal
Reunión de seguimiento en ETSIT
13/01/2009
![Page 2: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/2.jpg)
TAREAS: OBJETIVO Y
PLANIFICACIÓN GENERAL
![Page 3: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/3.jpg)
OBJETIVO CONCRETO
Diseño, desarrollo y evaluación de una arquitectura software que permita la traducción de voz a Lengua de Signos Española (LSE) aplicados a la traducción de las frases que un funcionario público pronuncia cuando atiende personalmente a una persona sorda.
Dos servicios elegidos: Renovación del Documento Nacional de Identidad (DNI). Información y gestión de los servicios que presta la DGT (Dirección General de Tráfico).
![Page 4: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/4.jpg)
PLANIFICACIÓN GENERAL
Tareas T0 T1 T2 T3 T4 T5 T6 T7 T8 T9 T10 T11
T1: Estudio Lingüístico
T2: Diseño Arquitectura
T3: Reconocimiento de voz
T4: Traducción por reglas
T5: Traducción estadística
T6: Generación de signos
T7: Evaluación prototipos
T8: Gestión/documentación
![Page 5: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/5.jpg)
ESTUDIO LINGÜÍSTICO Frases del DNI
Frases recogidas Proceso de traducción finalizado
Frases de la DGT Frases recogidas Proceso de traducción en curso
DISEÑO DE LA ARQUITECTURA
Primera versión del interfaz Mejora de la ergonomía
![Page 6: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/6.jpg)
Se ha definido un documento de
etiquetado de glosas
![Page 7: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/7.jpg)
RECONOCIMIENTO DE VOZ
Herramientas automáticas de generación de modelos de lenguaje y vocabularios a partir de las frases
TRADUCCIÓN BASADA EN REGLAS Frases del DNI
Entorno de desarrollo de reglas Proceso de generación de reglas casi terminado
Frases de la DGT Entorno de desarrollo de reglas No reglas desarrolladas
![Page 8: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/8.jpg)
![Page 9: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/9.jpg)
ADAPTACIÓN AL LOCUTOR DEL RECONOCEDOR
Reconocimiento independiente de locutor. Adaptación: sólo en caso de voces con acentos muy marcados. Mejora de tasa y velocidad muy importante. Grabación de 100 frases y regeneración de los modelos (1 hora aprox.)
![Page 10: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/10.jpg)
TRADUCCIÓN ESTADÍSTICA Frases del DNI
Algoritmos desarrollados y probados Evaluados con las nuevas frases
Frases de la DGT Algoritmos desarrollados y probados Falta evaluarlos con las frases
GENERACIÓN DE LOS SIGNOS Aprendizaje de HamNoSys Desarrollo de signos para DNI Desarrollo de signos para DGT
![Page 11: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/11.jpg)
SEA - HAMNOSYS
No es perfecto (75%). Permitiría generar primera versión para luego modificar. Demos en web
![Page 12: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/12.jpg)
![Page 13: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/13.jpg)
GENERACIÓN DE SIGNOS
ESCALERA.txt
![Page 14: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/14.jpg)
EVALUACIÓN DE PROTOTIPOS Definir escenarios Probar con personas sordas + cuestionarios Análisis de medidas objetivas y subjetivas
DOCUMENTACIÓN 2 personas están trabajando en la documentación de todos los programas generados Desarrollo de programas de instalación
![Page 15: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/15.jpg)
TRADUCCIÓN DE LSE A VOZ
Primera versión del interfaz Integración del CTV de Loquendo Módulo de traducción basado en reglas generadas a partir de las frases. Hecho para el caso del DNI.
![Page 16: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/16.jpg)
![Page 17: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/17.jpg)
WEB DEL PROYECTO
![Page 18: Desarrollo de un sistema de traducción de voz a Lengua de Signos Española para un servicio público de atención personal Reunión de seguimiento en ETSIT.](https://reader034.fdocumento.com/reader034/viewer/2022051616/553434005503461d5a8b4a51/html5/thumbnails/18.jpg)
LO QUE QUEDAENERO FEBRERO MARZO
GTH
Fundación CNSE
Conjuntos
Traducción DGT Signos DGT
Reglas DNI Reglas DGT
Evaluación
Documentación