Le géant de la technologie a récemment publié une mise à jour qui s'ajoutera aux compétences actuelles d'Alexa: la nouvelle traduction en direct pour Amazon Alexa.
Alexa peut désormais traduire en temps réel le portugais brésilien, l'italien, l'hindi, le français, l'allemand, l'espagnol et l'anglais. Quelle belle innovation!
La mise à jour de la traduction aide les utilisateurs à demander à Alexa de traduire une langue, et un affichage de la transcription apparaît également sur les appareils Echo.
De plus, Alexa peut désormais identifier plus précisément les pauses naturelles et les sauts de phrase dans la conversation.
La traduction n'a jamais été aussi simple. Cette technologie vocale changera complètement la donne pour les petites entreprises pour les années à venir.
Vous pouvez envisager d'étendre votre portée à différents marchés.
Vos clients peuvent désormais facilement demander des informations sans avoir à se soucier des interférences linguistiques.
Voyons comment fonctionne la traduction en direct pour Amazon Alexa.
Traduction en direct pour Amazon Alexa
Cette traduction en direct permet à des personnes parlant deux langues différentes de se parler.
Alexa joue le rôle d'interprète et traduire les deux côtés de la conversation.
Pour commencer, la fonctionnalité fonctionnera avec six paires de langues - anglais et espagnol, français, allemand, italien, portugais brésilien ou hindi - sur les appareils Echo avec des paramètres régionaux définis sur anglais américain.
Les clients peuvent demander à Alexa de lancer une session de traduction pour une paire de langues.
Une fois la session commencée, les clients peuvent prononcer des phrases ou des phrases dans les deux langues. Alexa identifie automatiquement une langue et traduit chaque côté de la conversation.
La fonction de traduction en direct exploite plusieurs systèmes Amazon existants, y compris la reconnaissance vocale automatique d'Alexa (ASR), Amazon Translate et Alexa texte pour parler système.
ID de langue
Alexa exécute deux ASR modèles en parallèle, avec un modèle distinct pour l'identification de la langue lors d'une session de traduction. La langue que vous parlez passe par les deux modèles ASR à la fois.
Cependant, une seule sortie du modèle ASR est envoyée au moteur de traduction.
Pour que la latence de la demande de traduction reste acceptable, cette mise en œuvre parallèle est nécessaire car attendre le début de la reconnaissance vocale jusqu'à ce que le modèle d'identification de langue ait renvoyé un résultat retarderait la lecture de l'audio traduit.
La sortie ASR associée est post-traitée et envoyée à Amazon Translate une fois que le système d'ID de langue a sélectionné une langue.
La traduction est transmise au système de synthèse vocale d'Alexa pour lecture.
De plus, Amazon a constaté que le modèle d'identifiant de langue fonctionne mieux lorsqu'il fonde sa décision à la fois sur les informations acoustiques concernant le signal vocal et les sorties des deux modèles ASR.
Dans le cas de locuteurs non natifs d'une langue, dont la parole a souvent des propriétés acoustiques cohérentes quelle que soit la langue parlée, les données ASR sont d'une grande aide.
Reconnaissance vocale
Le modèle acoustique convertit l'audio en la plus petite unité de parole appelée phonèmes.
Le modèle de langage encode les probabilités de chaînes de mots particulières, ce qui aide le système ASR à décider entre des traductions ou des interprétations alternatives de la même séquence de phonèmes.
Comme la plupart des systèmes ASR existants, ceux utilisés pour la traduction en direct Alexa incluent également un modèle acoustique et un modèle de langage.
Les systèmes ASR utilisés pour la traduction en direct, comme les modèles ASR existants d'Alexa, ont deux types de modèles de langage, à savoir le modèle de langage traditionnel et le modèle de langage neuronal.
Un modèle de langage traditionnel, encode les probabilités pour des chaînes de mots relativement courtes (généralement autour de quatre), et un modèle de langage neuronal, qui peut prendre en compte des dépendances à plus longue portée.
Les modèles de langage de traduction en direct ont été formés pour gérer un discours plus conversationnel couvrant un plus large éventail de sujets que les modèles ASR existants d'Alexa.
Amazon a utilisé la classification temporelle connexionniste (CTC) pour former les modèles acoustiques.
Pour rendre le modèle acoustique plus puissant, la société a également mélangé le bruit dans l'ensemble d'entraînement, ce qui a permis au modèle de se concentrer sur les caractéristiques du signal d'entrée qui varient moins dans différentes conditions acoustiques.
Travail de détail
Il y a une modification d'Alexa pointeur de fin.
Cela indique que le client a cessé de parler et qu'Alexa doit assurer le suivi. Cela est également nécessaire pour s'adapter au discours conversationnel.
Le pointeur de fin peut faire la distinction entre une pause à la fin d'une phrase et une pause au milieu d'une phrase, ce qui signifie que l'orateur peut continuer un peu plus longtemps.
Pour la traduction en direct, le pointeur de fin est modifié pour tolérer des pauses plus longues à la fin de chaque phrase, car les locuteurs engagés dans de longues conversations prendront souvent du temps entre les phrases pour formuler leurs pensées.
Enfin, le système Live Translation s'adapte aux disfluences courantes. Il aide également à formater la sortie ASR.
Le système de traduction automatique neuronale d'Amazon Translate a été conçu pour fonctionner avec la saisie textuelle.
Actuellement, Amazon explore plusieurs approches pour améliorer encore la fonctionnalité de traduction en direct.
L'un d'eux est l'apprentissage semi-supervisé, dans lequel les modèles existants d'Alexa annotent des données non étiquetées.
Amazon utilise les résultats les plus fiables comme exemples de formation supplémentaires pour les modèles ASR et ID de langue spécifiques à la traduction d'Amazon.
Amazon travaille également à adapter le moteur de traduction neuronale automatique aux données de parole conversationnelle.
Il génère des traductions qui intègrent un contexte pertinent tel que le ton de la voix ou les traductions formelles ou informelles.
Ceci est fait pour améliorer la fluidité de la traduction et sa robustesse à l'entrée en langue parlée.
Amazon cherche des moyens et travaille en permanence à l'amélioration de la qualité des traductions globales et des expressions familières et idiomatiques en particulier.
Utilisation de la traduction en direct
La technologie derrière Live Translate semble impressionnante, et vous pouvez en savoir plus à ce sujet dans le message d'annonce d'Amazon.
Live Translate est une fonctionnalité optimisée par l'IA qui peut reconnaître plusieurs langues lorsqu'elles sont parlées et traduire pour les deux locuteurs.
Il est également similaire au fonctions de traduction disponibles à partir d'autres assistants numériques
Live Translate est facile à utiliser, mais il y a quelques restrictions à garder à l'esprit.
Veuillez noter que la fonctionnalité n'est disponible que sur les appareils Echo aux États-Unis. Tout ce qu'ils doivent faire est de définir l'emplacement de leur appareil Echo et la langue du système sur «English US» pour utiliser Live Translate.
Les utilisateurs peuvent changez facilement les deux dans l'application mobile Alexa si nécessaire, mais ce n'est pas dans tous les pays, et cela change l'accent de parole d'Alexa, ainsi que l'heure, la météo et les alertes locales que vous recevez.
Live Translate fonctionne également sur tous les appareils Echo.
C'est juste que les utilisateurs d'Echo Show bénéficient d'une fonctionnalité supplémentaire: l'affichage de l'écran de l'Echo Show.
Il s'agit d'une traduction en direct pour les deux locuteurs dans chaque langue afin que vous puissiez relire les phrases les plus récemment prononcées.
Les haut-parleurs Echo sont actuellement les seuls appareils Alexa qui prennent en charge Live Translate.
Étapes pour utiliser la traduction en direct pour Amazon Alexa sur un appareil Echo
Ces étapes sont si rapides et vous pouvez avoir votre traduction facilement. Tout ce que vous avez à faire est ce qui suit:
1. Lorsque vous êtes prêt à utiliser Live Translate, dites: "Alexa, veuillez traduire l'anglais en [deuxième langue]." D'autres variantes de la phrase devraient fonctionner; assurez-vous simplement de dire à Alexa quelles langues traduire.
2. Continuez votre conversation comme d'habitude. Alexa écoutera et traduira si nécessaire. Pour que votre haut-parleur Echo puisse entendre et interpréter clairement les deux haut-parleurs, vous devez rester à proximité.
3. Lorsque la conversation est terminée, dites «Alexa, arrêtez» pour désactiver la traduction en direct.
Réflexions finales
Traduction en direct pour Amazon Alexa est une nouvelle fonctionnalité qui permet à l'utilisateur de comprendre facilement d'autres langues.
Que vous voyagiez dans un pays éloigné ou que vous rencontriez des parents étrangers, traduire une langue dans une autre n'a jamais été aussi facile!
Il vous suffit de demander à Alexa de lancer une session de traduction pour deux langues - l'anglais et l'espagnol, par exemple - alors vous êtes prêt à partir.
Vous pouvez commencer à discuter, dire une phrase dans l'un ou l'autre dialecte, et Alexa identifiera automatiquement la langue et traduira vos mots.
Ce programme fonctionne actuellement avec six paires de langues - anglais et espagnol, français, allemand, italien, portugais brésilien ou hindi - et nécessite un Appareil d'écho avec les paramètres régionaux définis sur English US.
Espérons que Live Translate mettra en lumière d'autres appareils alimentés par Alexa et dans d'autres pays également à l'avenir, mais pour l'instant, cela pourrait faciliter les visites avec des invités internationaux.
