이 기술 대기업은 최근 Alexa의 현재 기술을 추가 할 업데이트 인 Amazon Alexa를위한 새로운 라이브 번역을 발표했습니다.
Alexa는 이제 브라질 포르투갈어, 이탈리아어, 힌디어, 프랑스어, 독일어, 스페인어 및 영어를 실시간으로 번역 할 수 있습니다. 얼마나 큰 혁신입니까!
번역 업데이트는 사용자가 Alexa에게 언어를 번역하도록 요청하는 데 도움이되며 Echo 장치에도 대화 내용이 표시됩니다.
또한 Alexa는 이제 대화에서 자연스러운 일시 중지 및 문장 나누기를보다 정확하게 식별 할 수 있습니다.
번역이 그 어느 때보 다 쉬워졌습니다. 이 음성 기술은 앞으로 몇 년 동안 중소기업의 총체적인 판도를 바꿀 것입니다.
다른 시장으로 도달 범위를 확장하는 것을 고려할 수 있습니다.
이제 고객은 언어 간섭에 대해 걱정할 필요없이 쉽게 정보를 요청할 수 있습니다.
Amazon Alexa의 라이브 번역이 어떻게 작동하는지 살펴 보겠습니다.
Amazon Alexa 용 라이브 번역
이 실시간 번역을 통해 두 가지 다른 언어로 말하는 개인이 서로 대화 할 수 있습니다.
Alexa는 통역사 역할을합니다. 대화의 양면을 번역합니다.
우선이 기능은 로케일이 영어 미국으로 설정된 Echo 장치에서 영어 및 스페인어, 프랑스어, 독일어, 이탈리아어, 포르투갈어 (브라질), 힌디어 등 XNUMX 개 언어 쌍으로 작동합니다.
고객은 Alexa에게 한 쌍의 언어에 대한 번역 세션을 시작하도록 요청할 수 있습니다.
세션이 시작되면 고객은 어느 언어로든구나 문장을 말할 수 있습니다. Alexa는 자동으로 언어를 식별하고 대화의 각 측면을 번역합니다.
실시간 번역 기능은 Alexa의 자동 음성 인식 (ASR) 시스템, Amazon Translate 및 Alexa 텍스트 음성 변환 시스템.
언어 ID
Alexa는 XNUMX를 실행합니다. ASR 번역 세션 중 언어 식별을위한 별도의 모델과 함께 모델을 병렬로 연결합니다. 어떤 언어를 사용하든 한 번에 두 ASR 모델을 통과합니다.
그러나 하나의 ASR 모델의 출력 만 번역 엔진으로 전송됩니다.
번역 요청의 대기 시간을 허용하려면 언어 ID 모델이 결과를 반환 할 때까지 음성 인식을 시작하기를 기다리면 번역 된 오디오의 재생이 지연 될 수 있으므로이 병렬 구현이 필요합니다.
연결된 ASR 출력은 후 처리되고 언어 ID 시스템이 언어를 선택하면 Amazon Translate로 전송됩니다.
번역은 재생을 위해 Alexa의 텍스트 음성 변환 시스템으로 전달됩니다.
또한 Amazon은 언어 ID 모델 음성 신호에 대한 음향 정보와 두 ASR 모델의 출력 모두에 대한 결정을 내릴 때 가장 잘 작동합니다.
비 원어민 언어 사용자의 경우, 사용하는 언어에 관계없이 음성이 종종 일관된 음향 특성을 갖는 경우 ASR 데이터가 큰 도움이됩니다.
음성 인식
음향 모델은 오디오를 음소라고하는 가장 작은 음성 단위로 변환합니다.
언어 모델은 특정 단어 문자열의 확률을 인코딩하므로 ASR 시스템이 동일한 음소 시퀀스의 대체 번역 또는 해석 중에서 결정할 수 있습니다.
대부분의 기존 ASR 시스템과 마찬가지로 Alexa 라이브 번역에 사용되는 시스템에는 음향 모델과 언어 모델도 포함됩니다.
Alexa의 기존 ASR 모델과 같이 라이브 번역에 사용되는 ASR 시스템에는 두 가지 유형의 언어 모델, 즉 전통적인 언어 모델과 신경 언어 모델이 있습니다.
전통적인 언어 모델은 비교적 짧은 단어 문자열 (일반적으로 약 XNUMX 개)에 대한 확률을 인코딩합니다. 신경 언어 모델이는 더 긴 범위의 종속성을 설명 할 수 있습니다.
라이브 번역 언어 모델은 Alexa의 기존 ASR 모델보다 더 광범위한 주제를 다루는 대화 형 음성을 처리하도록 훈련되었습니다.
Amazon은 연결주의 시간 분류 (CTC)를 사용하여 음향 모델을 훈련했습니다.
음향 모델을 더 강력하게 만들기 위해 회사는 또한 소음을 교육 세트에 혼합하여 모델이 다양한 음향 조건에서 덜 변하는 입력 신호의 특성에 집중할 수 있도록했습니다.
세부 작업
Alexa의 수정이 있습니다. 끝점.
이는 고객이 말하기를 중단했으며 Alexa가 후속 조치를 취해야 함을 나타냅니다. 이것은 대화식 연설에 적응하는 데에도 필요합니다.
끝 포인터는 문장 끝의 일시 중지와 문장 중간 일시 중지를 구분할 수 있습니다.
라이브 번역의 경우, 긴 대화에 참여하는 화자가 생각을 공식화하기 위해 종종 문장 사이에 시간이 걸리기 때문에 각 문장의 끝에서 더 긴 일시 중지를 허용하도록 끝점을 수정합니다.
마지막으로 라이브 번역 시스템은 일반적인 불일치를 조정합니다. 또한 ASR 출력을 형식화하는 데 도움이됩니다.
Amazon Translate의 신경-기계-번역 시스템은 텍스트 입력과 함께 작동하도록 설계되었습니다.
현재 Amazon은 실시간 번역 기능을 더욱 개선하기 위해 여러 가지 접근 방식을 모색하고 있습니다.
그중 하나는 Alexa의 기존 모델이 레이블이없는 데이터에 주석을 추가하는 준지도 학습입니다.
Amazon은 Amazon의 번역 별 ASR 및 언어 ID 모델에 대한 추가 교육 예제로 신뢰도가 가장 높은 출력을 사용합니다.
Amazon은 또한 신경 기계 번역 엔진을 대화 음성 데이터에 적용하기 위해 노력하고 있습니다.
음성 톤 또는 공식 대 비공식 번역과 같은 관련 컨텍스트를 통합하는 번역을 생성합니다.
이것은 번역의 유창함과 구어 입력에 대한 견고성을 향상시키기 위해 수행됩니다.
Amazon은 방법을 모색하고 전체 번역, 특히 구어체 및 관용적 표현의 품질을 개선하기 위해 지속적으로 노력하고 있습니다.
라이브 번역 사용
Live Translate의 기술은 인상적이며 Amazon의 발표 게시물에서 자세히 알아보십시오..
라이브 번역은 여러 언어를 말하면서 인식하고 두 사람 모두를 위해 번역 할 수있는 AI 기반 기능입니다.
또한 다음과 유사합니다. 다른 디지털 비서에서 사용할 수있는 번역 기능
라이브 번역은 사용하기 쉽지만 유의해야 할 몇 가지 제한 사항이 있습니다.
이 기능은 미국의 Echo 장치에서만 사용할 수 있습니다. 라이브 번역을 사용하려면 Echo 장치의 위치와 시스템 언어를 "English US"로 설정하기 만하면됩니다.
사용자 수 둘 다 쉽게 변경 Alexa 모바일 앱에서 필요한 경우 모든 국가에 해당되는 것은 아니며 이렇게하면 Alexa의 말하기 억양과 함께받는 시간, 날씨 및 지역 알림이 변경됩니다.
라이브 번역은 모든 Echo 장치에서도 작동합니다.
Echo Show 사용자에게는 Echo Show의 화면 디스플레이라는 추가 기능이 있습니다.
각 언어의 두 화자 모두를위한 실시간 번역이므로 가장 최근에 말한 문장을 다시 읽을 수 있습니다.
에코 스피커는 현재 라이브 번역을 지원하는 유일한 Alexa 장치입니다.
Echo 디바이스에서 Amazon Alexa 용 라이브 번역을 사용하는 단계
이 단계는 매우 빠르고 쉽게 번역 할 수 있습니다. 다음 만 수행하면됩니다.
1. 실시간 번역을 사용할 준비가되면 "Alexa, 영어를 [제 XNUMX 언어]로 번역 해주세요."라고 말합니다. 구문의 다른 변형이 작동합니다. Alexa에게 번역 할 언어를 알려주십시오.
2. 대화를 평소와 같이 유지하십시오. Alexa는 필요에 따라 듣고 번역합니다. Echo 스피커가 두 스피커를 명확하게 듣고 해석하려면 가까운 거리에 있어야합니다.
3. 대화가 끝나면 "Alexa, Stop"이라고 말하여 실시간 번역을 끕니다.
최종 생각
라이브 번역 for Amazon Alexa는 사용자가 다른 언어를 쉽게 이해할 수 있도록하는 새로운 기능입니다.
외딴 나라를 여행하든 외국 친척이 한 언어를 다른 언어로 번역하는 것을 따라 잡는 것은 결코 쉬운 일이 아닙니다!
Alexa에게 두 가지 언어 (예 : 영어와 스페인어)에 대한 번역 세션을 시작하도록 요청하기 만하면됩니다.
채팅을 시작하고 어느 방언 으로든 구를 말하면 Alexa가 자동으로 언어를 식별하고 단어를 번역합니다.
이 프로그램은 현재 영어 및 스페인어, 프랑스어, 독일어, 이탈리아어, 포르투갈어 (브라질) 또는 힌디어의 XNUMX 개 언어로 작동하며 에코 장치 로케일이 English US로 설정되어 있습니다.
바라건대, Live Translate는 다른 Alexa 기반 장치와 다른 국가에서도 미래에 조명을 제공 할 것이지만 현재로서는 해외 게스트와의 방문이 더 쉬워 질 수 있습니다.
