Joaquim Llisterri

Grup de Fontica, Departament de Filologia Espanyola

Concatenacin de unidades almacenadas
mediante sntesis paramtrica
Creacin de un diccionario de unidades de diccionario de unidades de
sntesis sntesis
Parametrizacin Parametrizacin de las unidades
Modelo del tracto vocal Modelo del tracto vocal para la sntesis a
partir de los parmetros utilizados
Sntesis por LPC (Linear Predictive Coding)
Sntesis por formantes
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
La concatenacin de unidades
almacenadas mediante sntesis paramtrica
Las unidades de sntesis
El modelo de la fuente y el filtro
en la sntesis del habla
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Las unidades de sntesis
La seleccin de las unidades de
sntesis
Las unidades de sntesis
Desarrollo de diccionarios de
unidades de sntesis
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
La seleccin de las unidades de sntesis
Condiciones
flexibilidad en la produccin de
mensajes
calidad del habla obtenida
complejidad de procesamiento
El tamao de la unidad y el problema de
la memoria
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
La seleccin de las unidades de sntesis
La variabilidad de la unidad y las
dificultades de la concatenacin
La relacin entre las unidades, el
modelo de produccin del habla y el
modelo de anlisis lingstico
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Unidades de sntesis
Frases y palabras
Difonemas (trifonemas,
cuatrifonemas, polifonos) y
semislabas
Fonemas, alfonos y tramas
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Frases y palabras
Utilizadas en los sistemas de
grabacin-reproduccin
Ofrecen una calidad alta
Requisitos de memoria elevados
Requieren una prosodia adecuada
al mensaje en el que se insertan
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Adecuacin de la entonacin
Restaurantes
de _________
vila
Madrid
Salamanca
Cuenca
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Adecuacin de la entonacin
He encontrado
____________
ocho
nueve
diez

Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Difonemas (trifonemas, cuatrifonemas,
polifonos) y semislabas
Usadas preferentemente en los
sistemas de sntesis por
concatenacin
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Semislaba
Fragmento de slaba comprendido
entre su inicio y el centro de la
vocal o entre el centro de la vocal
y su final
/kasa/ - /ka/ + /asa/
Unidades de sntesis
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Unidades de sntesis
Difonema
Segmento acstico que incluye la transicin
entre dos fonemas consecutivos, formado
por la parte estacionaria del primero, la
transicin del primero al segundo y la parte
estacionaria del segundo
/kasa/ - /k/ + /ka/ + /as/ + /sa/ + /a/
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Unidades de sntesis
Cuatrifonemas usados en un sistema real de sntesis
V + lr + V; V + lj + V; C + lj + V; V + lw +
V; C + lw + V
V + rl + V; C + rj + V; V + rj + V; V + rw
+ V; C + rw + V
V+ jl + V; V + jl + C; V + jr + V; V + jr + C
V + wl + V; V + wl + C; V + wr + V;
V + wr + C
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Fonemas, alfonos y tramas (frames)
Unidades utilizadas preferentemente en los
sistemas de sntesis por reglas.
Alfonos o fonos
Inventario reducido para cada lengua
Degradacin de la calidad producida por los
problemas de concatenacin
Obligan a generar la prosodia
artificialmente
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Fonemas, alfonos y tramas (frames)
Tramas (frames)
Fragmento de la seal acstica que
presenta caractersticas uniformes
(transicin, segmento estacionario)
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Valoracin aproximada de la base de datos LPC para la
sntesis del castellano segn el tipo de unidades de sntesis
Tipo de unidad Nmero de unidades Tamao en Kb
Fonema 29 0.174
Alfono 100 0.6
Difonema 500 15
Semislaba 2000 96
Morfema 10000 1800
Mart, 1991
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Ejemplos de sntesis por concatenacin
de difonemas y semislabas
Dixon y Maxey (1968): sntesis por formantes mediante
concatenacin de difonemas [Klatt, 1987, (18)]
Olive (1977): concatenacin de difonemas codificados
mediante prediccin lineal [Klatt, 1987, (22)]
Echo (1982): sistema de concatenacin de difonemas de
bajo coste [Klatt, 1987, (29)]
Browman (1980): concatenacin de semislabas
codificadas por prediccin lineal [Klatt, 1987, (23)]
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Ejemplos de sntesis por concatenacin
de difonemas y semislabas
Dixon y Maxey (1968)
Sntesis por formantes mediante
concatenacin de difonemas
[Klatt, 1987, (18)]
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Ejemplos de sntesis por concatenacin
de difonemas y semislabas
Olive (1977)
Concantenacin de difonemas
codificados mediante prediccin
lineal
[Klatt, 1987, (22)]
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Ejemplos de sntesis por concatenacin
de difonemas y semislabas
Echo (1982)
Sistema de concatenacin de
difonemas de bajo coste
[Klatt, 1987, (29)]
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Determinacin del tipo de unidad
Definicin del corpus de unidades
Diseo del corpus de unidades
Seleccin del locutor
Grabacin del corpus
Segmentacin y validacin del diccionario
Desarrollo de diccionarios de unidades de
sntesis
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios
de unidades de sntesis
Determinacin del tipo de unidades
de sntesis
En conversin de texto a habla suelen
utilizarse unidades como el difonema,
trifonema o cuatrifonema o unidades
menores como fonemas o alfonos
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Determinacin del tipo de unidad
Definicin del corpus de unidades
Diseo del corpus de unidades
Seleccin del locutor
Grabacin del corpus
Segmentacin y validacin del diccionario
Desarrollo de diccionario de unidades de
sntesis
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios
de unidades de sntesis
Definicin del corpus de unidades
Determinacin del inventario
segmental de la lengua, relacionado
con el mdulo de transcripcin
fontica automtica
Establecimiento del inventario
completo de unidades de sntesis
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios de unidades de sntesis
Requisitos reales
Conjunto de fonemas rico y no redundante
Debe incluir nicamente los alfonos que
muestran diferencias significativas en sus
propiedades espectrales
Debe incluir todos los alfonos necesarios para
incorporar los fenmenos prosdicos (p. ej. el
acento)
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
NAVARRO TOMS, T. (1918) Manual de pronunciacin espaola. Consejo
Superior de Investigaciones Cientficas: Madrid, Instituto Miguel de
Cervantes (Publicaciones de la Revista de Filologa Espaola, III). 21
edicin, 1982.
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
QUILIS, A. (1985) El comentario fonolgico y fontico de textos.
Teora y prctica. Madrid: Arco/Libros.
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
CANELLADA, M.J. - MADSEN, J. K. (1987) Pronunciacin del
espaol. Lengua hablada y literaria. Madrid: Castalia.
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Alfonos de /N/
/N/ [ m] bilabial m campo
[ M] labiodental n enfado
[ n+] interdental n once
[ n ] dental n anda
[ n] alveolar n enseres
[ nJ] palatalised n conllevar
[ ] palatal n caa
[ N] velar n conga
Hasta
qu punto
es
necesaria
la
variacin
alofnica?
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios de unidades de sntesis
Decisiones reales: vocalismo
No se incluyen los alfonos abiertos de
[e] y [o]
Diferencias espectrales
Condicionados contextualmente
No se incluyen los alfonos nasalizados
de las vocales
Economa del inventario
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios de unidades de sntesis
Decisiones reales: vocalismo
No se incluyen los alfonos palatal y
velar de [a]
Diferencias espectrales
Condicionados contextualmente
No se incluyen los alfonos relajados
Se incluye un alfono acentuado y
otro no acentuado para cada vocal
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios de unidades de sntesis
Decisiones reales: consonantismo
No se diferencia el alfono interdental y
el alfono dental de [n]
Diferencias espectrales
Se incluye la aproximante alveolar [ ]
Variacin libre con [r] no predictible
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios de unidades de sntesis
Decisiones reales: consonantismo
Se incluyen alfonos que no son
propios del inventario del espaol
como [ts] y [ S]
Usados en la pronunciacin de
nombres extranjeros
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios de unidades de sntesis
Decisiones reales: inventario
14 alfonos voclicos: 5 acentuados, 5 no
acentuados, 2 semiconsonantes, 2
semivocales
36 alfonos consonnticos: 6 bilabiales, 2
labiodentales, 2 interdentales, 5 dentales,
8 alveolares, 1 prepalatal, 5 palatales, 7
velares
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Determinacin del tipo de unidad
Definicin del corpus de unidades
Diseo del corpus de unidades
Seleccin del locutor
Grabacin del corpus
Segmentacin y validacin del diccionario
Desarrollo de diccionario de unidades de
sntesis
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios
de unidades de sntesis
Diseo del corpus de unidades
Seleccin de contextos en los
que aparecen las unidades
Integracin de las unidades en
logatomos, palabras o frases
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Configuracin bsica: lab(a) __ so
Contexto anterior y posterior: mismo
timbre que el fono adyacente al difonema
Vocales graves: [p]
Consonantes graves: [o] [u]
Vocales agudas: [t]
Consonantes agudas: [a] [e] [i]
Desarrollo de diccionarios de unidades de sntesis
Seleccin de contextos
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
[#a] taso / ataso / atas [#i] taso / itaso / itas
[#rr] Rtaso / rataso / ratas
[#k] ctaso / cataso / catas
[el] Lteleso / latleso / lateleso / lateles
[um] Lpumoso / lapmoso / lapumoso / lapumos
[ro] Lberopo / labropo / laberopo / laberop
[bba] Lbobato / labbato / labobato / labobat
[tr] Lbetraso / labtraso / labetraso/ labetras
Desarrollo de diccionarios de unidades de sntesis
Corpus de difonemas
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios de unidades de sntesis
Corpus de difonemas
[bs] Lbubsaso / labbsaso / labubsaso /labubsas
[ea] Lteato / latato / lateato / lateat
[io] Ltiopo / latopo / latiopo / latiop
[o#] lbapo / labapo / labap
[e#] lbate / labate / labat
[z#] Lbatez / labtez / labatez
[ll#] Lbatell / labtell / labatell
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios de unidades de sntesis
Frases fonticamente equilibradas
Puedes fumar, pero vete al balcn.
La ta Carmen quera guisar el conejo.
No des patadas a los rosales.
Necesito un centrmetro para medir las dos telas.
Con un quilo de boniatos ya tengo de sobras.
Quizs pueda volver a llamar maana por la noche.
Si quieres rezar, te dejo solo.
Nunca deb dinero ni lo tom prestado.
Sus caceras acabaron con la fauna de la zona.
Me diste la paga de este mes.
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Determinacin del tipo de unidad
Definicin del corpus de unidades
Diseo del corpus de unidades
Seleccin del locutor
Grabacin del corpus
Segmentacin y validacin del diccionario
Desarrollo de diccionario de unidades de
sntesis
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios
de unidades de sntesis
Seleccin del locutor
Voz adecuada para la tcnica de
sntesis utilizada
Buen lector
Pruebas de sntesis y evaluacin
por potenciales usuarios
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios de unidades de sntesis
Decisiones reales: pruebas
8 frases diferentes
Cuatro condiciones
(1) Seal natural
(2) Seal sintetizada con prosodia natural
(3) Seal sintetizada con prosodia sintetizada
(4) Seal sintetizada sin prosodia
4 locutores
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios de unidades de sntesis
Decisiones reales: pruebas
Combinacin de las frases en 96 pares
33 oyentes sin experiencia en habla sintetizada
(3168 respuestas) y 10 oyentes con experiencia
en habla sintetizada (960 respuestas)
Se solicita juzgar cul es la voz ms agradable
en cada par de estmulos, con posibilidad de
respuesta indiferente
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios de unidades de sntesis
Decisiones reales: pruebas
Oyentes sin
experiencia
Oyentes
expertos
Voz A 29,6% 20,83%
Voz B 25,18% 30,31%
Voz C 21,33% 26,66%
Voz D 18,15% 18,12%
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Determinacin del tipo de unidad
Definicin del corpus de unidades
Diseo del corpus de unidades
Seleccin del locutor
Grabacin del corpus
Segmentacin y validacin del diccionario
Desarrollo de diccionario de unidades de
sntesis
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios
de unidades de sntesis
Grabacin del corpus
En estudio
Supervisada por un experto
para evitar errores
segmentales y prosdicos
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Determinacin del tipo de unidad
Definicin del corpus de unidades
Diseo del corpus de unidades
Seleccin del locutor
Grabacin del corpus
Segmentacin y validacin del diccionario
Desarrollo de diccionario de unidades de
sntesis
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios
de unidades de sntesis
Segmentacin de las unidades
Definicin de criterios fonticos de
segmentacin
Inciden en la concatenacin y en la
calidad de la sntesis
Segmentacin automtica
Revisin a cargo de un experto
Joaquim Llisterri
Grup de Fontica, Departament de Filologia Espanyola
Desarrollo de diccionarios
de unidades de sntesis
Validacin del diccionario
Pruebas de sntesis
Evaluacin por parte de
potenciales usuarios