Acuité auditive temporelle mesurée par les TMTFs

21 èmes journées de la SSIPR MADERE-Nov 2003 Acuité auditive temporelle mesurée par les TMTFs Incidences sur l intelligibilité? Emeric KATONA

I. Définition de l enveloppe temporelle II. Importance de l enveloppe temporelle dans la perception de la parole III. Mesure de l acuité temporelle i. TMTF ii. TMTF du 2nd ordre IV. Modélisation de l acuité auditive temporelle V. Appareillage: risque sur l intelligibilité i. Compression ii. Débruiteurs et algorithmes phonétiques

Définitions Parole = signal complexe évoluant dans le temps en fréquence et en intensité Modulations rapides = structure fine Modulations lentes d amplitude = enveloppe

Définitions mathématiques Fourrier considère que tout signal est une somme de sinusoïdes Transformée de Fourrier: Spectre fréquentielle Évolution dans le temps de ce spectre= sonagramme

Définitions mathématiques Hilbert considère que tout signal est un produit d une porteuse par une enveloppe (qui module en amplitude la porteuse) Transformée de Hilbert factorise le signal porteuse enveloppe

Spectre de modulations L enveloppe est un signal qui selon Fourrier correspond à une somme de sinusoïdes Appliquer une transformée de Fourrier à l enveloppe nous fournit le spectre de modulations Profondeur des modulations papapa

Sensibilité à l enveloppe de la parole Reconnaissance de la parole sur la base d indications temporelles primaires (Speech recognition with primarily temporal cues) Shannon, Zeng et Kamath 1995

Sensibilité à l enveloppe de la parole Effet de la réduction des modulations temporelles lentes sur la perception de la parole (Effect of reducing slow temporal modulations on speech reception) Drullman, Festen et Plomp 1994.

Effet de la réduction des modulations temporelles lentes sur la perception de la parole (Effect of reducing slow temporal modulations on speech reception) Drullman, Festen et Plomp 1994. papapa Une claire réduction de l intelligibilité avec des fréquences de coupures > 64 Hz (modulations f m <64 réduites) Pas de réduction de l intelligibilité quand seules les f m < 4Hz sont réduites

Sensibilité à l enveloppe de la parole Des sons chimériques revélent des dichotomies dans la perception auditive (Chimaeric sounds reveal dichotomies in auditory perception) Smith, Delgutte et Oxenham 2002 Structure fine 1 Structure fine 2 Structure fine 2 Structure fine 1

Mesure de la sensibilité à l enveloppe Fonctions de transfert de la modulation temporelle TMTF = Temporal Modulation Transfer Functions based upon modulation thresholds. Viemeister 1979 f m m

Mesure de la sensibilité à l enveloppe TMTF = Temporal Modulation Transfer Functions 100 % 50 % 0 %

db=20log% 1 % 2 % 4 % 5 % 10 % 25 % 50 % 79 % BB -40-38 -36-34 -32-30 -28-26 -24-22 -20-18 -16-14 -12-10 -8-6 -4-2 2 4 8 16 32 64 128

TMTF chez le normo-entendant Viemeister (1979); Bacon & Viemeister (1985); Forrest & Green (1987); Patterson et coll. (1978)

TMTF Même acuité chez le malentendant avec perte auditive plate Moore et al (1992)

Mesure de la sensibilité à l enveloppe TMTF du 2 nd ordre : Second order Temporal Modulation Transfer Functions. Lorenzi Soares et Vonner 2000 Signal initial= son pur

Mesure de la sensibilité à l enveloppe TMTF du 2 nd ordre : Second order Temporal Modulation Transfer Functions. Lorenzi Soares et Vonner 2000 Signal initial modulé à f m et de m = modulation porteuse

Mesure de la sensibilité à l enveloppe TMTF du 2 nd ordre : Second order Temporal Modulation Transfer Functions. Lorenzi Soares et Vonner 2000 Modulation porteuse modulé à f m et de m

Mesure de la sensibilité à l enveloppe TMTF du 2 nd ordre : Second order Temporal Modulation Transfer Functions. Lorenzi Soares et Vonner 2000 Signal initial= bruit blanc

Mesure de la sensibilité à l enveloppe TMTF du 2 nd ordre : Second order Temporal Modulation Transfer Functions. Lorenzi Soares et Vonner 2000 Bruit blanc modulé à f m et de m = modulation porteuse

Mesure de la sensibilité à l enveloppe TMTF du 2 nd ordre : Second order Temporal Modulation Transfer Functions. Lorenzi Soares et Vonner 2000 Modulation porteuse modulé à f m et de m

Mesure de la sensibilité à l enveloppe TMTF du 2 nd ordre : Second order Temporal Modulation Transfer Functions. Lorenzi Soares et Vonner 2000 m

Mesure de la sensibilité à l enveloppe TMTF du 2 nd ordre : Second order Temporal Modulation Transfer Functions. Lorenzi Soares et Vonner 2000 f m f m+ f m f m- f m

Mesure de la sensibilité à l enveloppe TMTF du 2 nd ordre : Second order Temporal Modulation Transfer Functions. Lorenzi Soares et Vonner 2000

TMTF du 2 nd ordre Résultats chez le normo-entendant:

TMTF du 2 nd ordre Chez le normo-entendant : Lorenzi et coll. 2001 «Second order modulation detection threshold for pure-tone and narrow-band noise carriers» JASA

TMTF du 2 nd ordre Non linéarités dans les voies auditives -> effet audible Source de ces non linéarités = compression rapide cochléaire? Surdité de perception->perte de compression cochléaire Suppression du produit de distorsion f m? Dommages cochléaires devraient donner: Des seuils TMTF du 1er ordre préservés Des seuils TMTF du 2nd ordre dégradés

TMTF du 2 nd ordre Résultats entendant/ malentendant: Audition normale Malentendant

Les dommages cochléaires n ont qu un petit effet sur la détection des enveloppes sinusoïdales et complexes Les non-linéarités (ex.: battements) ont probablement une origine centrale

Modélisations de la sensibilité à l enveloppe Approche TMTF 1er ordre, analyse linéaire

Banc de filtres de modulations [Kay & Matthews,, 1972; Bacon & Grantham, 1989; Houtgast, 1989; Yost, Sheft,, & Opie,, 1989; Dau,, 1996] Décomposition par plusieurs filtres chacun dédiés à une gamme de fréquences de modulation Une représentation interne d un spectre de modulation? Avec des distorsions supplémentaires fm (Hz)

Indices acoustiques dans l enveloppe temporelle de la parole : les fréquences de modulations présentes dans la parole Constantes de temps = danger La perception des modulations d amplitude lentes comprises entre 4 et 16 Hz est une condition nécessaire, voire suffisante à la compréhension de la parole.

Indices acoustiques dans l enveloppe temporelle de la parole : le facteur de crête? Facteur de crête= Intensité Crête / Intensité RMS Son pur : fact. crête = 1 / (1/ 2) 1.41421 Sons de la parole : variable (de 3 à 10 dans des mesures préliminaires) Compression traitant plus les crêtes que le niveau global = risque

Indices acoustiques dans l enveloppe temporelle de la parole :la profondeur de modulation 90 80 70 db SPL 60 n 1 n 2 n 3 n 4 50 40 30 0 0,1 0,2 0,3 0,4 0,5 0,6 0,7 0,8 0,9 t(s)

Intelligibilité de la parole dans le bruit

Effets possibles des traitements du signal (DSP) dans la prothèse auditive: débruiteurs et compresseurs Risque de diminuer le rapport S/B Risque de réduire sélectivement certaines fréquences de modulations Risque de réduire exagérément la profondeur de modulation