http://news.naver.com/main/read.nhn?mode=LSD&mid=sec&sid1=105&oid=421&aid=0003360455



올 여름 테스트버전 출시…피차이 CEO "자녀 아프면 AI가 병원에 직접 전화"

천재 바둑기사 이세돌 9단을 꺾어 전세계를 충격으로 몰아넣었던 구글의 인공지능(AI) 기술이 이번에는 스스로 전화걸고, 사람과 통화하는 AI를 만들어 전세계 개발자들을 깜짝 놀라게 했다. '인간다운 AI를 만들겠다'는 구글의 포부가 허언이 아니었음을 입증한 것이다.

행사 첫날 가장 주목을 받은 것은 구글의 인공지능(AI) 비서 '구글어시스턴트'의 새 기능인 음성예약이었다. 사람과 똑같은 목소리의 AI는 직접 미용실과 식당에 전화를 걸어 능숙하게 예약을 해냈다.

식당 주인이 '해당 시간에 예약이 어렵다'고 하자 AI는 '흐음'이라며 사람과 똑같은 의성어를 구사해 행사 현장을 깜짝 놀라게 했다. 테크크런치 등 외신에서도 "예상대로 진행되지 않는 통화도 우아하게 처리했다"며 놀랍다는 반응을 내놨다. 시연을 마치자 피차이 CEO는 "당신이 바쁜 상황에서 아이가 아프고 의사의 진료를 받아야할 때, 유용하게 사용할 수 있을 것"이라고 말했다.

이날 보여진 대화는 미리 준비된 이벤트로 추측되지만, AI 기술로 인간의 역할을 대체하겠다는 구글의 야심이 읽히는 대목이었다.



다음은 구글 웹사이트에서 소개한 버전입니다



https://ai.googleblog.com/2018/05/duplex-ai-system-for-natural-conversation.html

이하 구글번역

Google Duplex : 전화를 통해 실제 업무를 수행하는 AI 시스템
2018 년 5 월 8 일 화요일
Yani Leviathan, Principal Engineer 및 Yossi Matias, Google 엔지니어링 담당 부사장

인간과 컴퓨터의 상호 작용에 대한 오랫동안 지속 된 목표는 사람들과 컴퓨터를 자연스럽게 대화 할 수있게하는 것이 었습니다. 최근 몇 년 동안, 우리는 컴퓨터의 능력이 자연 언어를 이해하고 생성하도록 혁명을 목격했습니다. 특히 심 신경 네트워크 (예 : Google 음성 검색 , WaveNet). 아직도 오늘날의 최첨단 시스템에서도 자연 언어를 이해하지 못하는 절름발이의 컴퓨터 화 된 목소리와 이야기하는 것이 좌절하는 경우가 많습니다. 특히 자동화 된 전화 시스템은 여전히 간단한 단어와 명령을 인식하는 데 어려움을 겪고 있습니다. 대화 흐름에 관여하지 않으며 발신자가 시스템이 아니라 발신자에게 시스템을 조정하도록합니다.

오늘 우리는 전화를 통해 "실제"작업을 수행하기 위해 자연스러운 대화를 수행하는 새로운 기술인 Google Duplex를 발표합니다. 이 기술은 특정 유형의 약속을 예약하는 것과 같은 특정 작업을 완료하기위한 것입니다. 이러한 작업을 위해 시스템은 가능한 한 자연스러운 대화 경험을 제공하여 사람들이 컴퓨터에 적응하지 않고 다른 사람과 마찬가지로 정상적으로 말하게합니다.

주요 연구 결과 중 하나는 Duplex를 광범위하게 탐색 할 수있는 좁은 폐쇄 도메인으로 제한하는 것이 었습니다. 듀플렉스는 이러한 영역에서 깊이 훈련받은 후에 만 자연스러운 대화를 수행 할 수 있습니다. 그것은 일반적인 대화를 수행 할 수 없습니다.

다음은 Duplex가 전화를 걸 때의 예입니다 (다른 목소리 사용).
헤어 살롱 예약 듀플렉스 스케쥴링 :http://www.gstatic.com/b-g/DMS03IIQXU3TY2FD6DLPLOMBBBJ2CH188143148.mp3
식당에 듀플렉스 전화 : http://www.gstatic.com/b-g/KOK4HAMTAPH5Z96154F6GKUM74A3Z1576269077.mp3

자연스럽게 들리는 동안, 이들 및 다른 예는 완전 자동 컴퓨터 시스템과 실제 비즈니스 간의 대화입니다.

Google Duplex 기술은 자연스럽게 들리도록 설계되어 대화를 편안하게 해줍니다. 사용자와 기업이이 서비스에 대해 좋은 경험을 갖고 있다는 사실은 우리에게 중요합니다. 투명성이 핵심 요소입니다. 기업들이 전화의 의도를 분명히하고 비즈니스가 컨텍스트를 이해할 수 있기를 바랍니다. 우리는 앞으로 몇 개월 동안 올바른 접근법을 실험 할 것입니다.

자연스러운 대화 진행하기
자연어를 이해하기 어렵고, 자연스러운 행동을 모델로 삼기 쉽고, 지연 시간에 대한 빠른 처리가 필요하며, 적절한 억양으로 자연스러운 음성을 생성하는 것이 어렵습니다.

사람들은 서로 이야기 할 때 컴퓨터와 대화 할 때보 다 복잡한 문장을 사용합니다. 종종 중간 문장을 바로 잡거나, 필요한 것보다 더 장황하거나, 단어를 생략하고 대신 문맥에 의존합니다. "또한 화요일부터 목요일까지 우리는 11시에서 2 시까 지 열려 있고 4시에서 9 시까 지, 그리고 금요일, 토요일, 일요일 우리는 ... 또는 금요일에 다시 문을 연다. , 토요일 우리는 11시 9 분, 그리고 일요일은 1 시부 터 9 시까 지 열려 있습니다. "
복잡한 문장의 예 : http://www.gstatic.com/b-g/BT5EH08P73O41Q94PTWNMV42DAWU8Z192313240.mp3

자연스러운 자연스러운 말하기에서 사람들은 기계에 말을 할 때보 다 빠르고 명확하게 말함으로써 음성 인식이 어렵고 단어 오류율이 높아집니다. 전화가 걸려 오는 중에 문제가 심각 해지므로 배경 소음 및 음질 문제가 큽니다.

더 긴 대화에서 동일한 문장은 문맥에 따라 매우 다른 의미를 가질 수 있습니다. 예를 들어 예약 예약시 "Ok for 4"는 예약 시간 또는 인원 수를 의미 할 수 있습니다. 관련 문맥은 여러 문장으로되어있을 수 있으며, 전화 통화에서 단어 오류율이 증가하여 문제가 발생합니다.


무엇을 말할 것인지 결정하는 것은 작업과 대화의 상태 모두의 기능입니다. 포함 암시 프로토콜 - 또한, 천연 대화에서 몇 가지 일반적인 관행이 있습니다 퇴고를 ( "다음 금요일은"때를 위해 "" "금요일 다음 주에, 18."?), 동기화 ( "당신은 내 말 들려?") , 중단 ( "번호는 212-"미안 해요? "), 일시 중지 ("잠깐만 기다려주십시오. 고맙습니다. "는 1 초의 일시 중지와 2 분의 다른 의미).

양면 입력
Google Duplex의 대화는 이해 , 상호 작용 , 타이밍 및 말하기의 진보 덕분에 자연스럽게 들립니다 .

듀플렉스의 핵심은 TFX ( TensorFlow Extended )를 사용하여 구축 된 이러한 과제에 대처하도록 설계된 반복적 인 신경망 (RNN)입니다 . 고정밀도를 얻기 위해 Duplex의 RNN을 익명화 된 전화 대화 데이터의 코퍼스에 대해 교육했습니다. 네트워크는 Google의 자동 음성 인식 (ASR) 기술뿐만 아니라 오디오, 대화 기록, 대화 매개 변수 (예 : 약속에 대한 원하는 서비스 또는 현재 시간)의 기능을 사용합니다. 그리고 더. 우리는 우리의 이해 모델을 각 업무에 대해 개별적으로 훈련 시켰지만 업무 전반에 걸쳐 공유 자료를 활용했습니다. 마지막으로 TFX의 하이퍼 매개 변수 최적화를 사용하여 모델을 더욱 향상 시켰습니다.

들어오는 사운드는 ASR 시스템을 통해 처리됩니다. 이렇게하면 컨텍스트 데이터 및 기타 입력으로 분석 된 텍스트가 생성되어 TTS 시스템을 통해 소리내어 읽혀지는 응답 텍스트가 생성됩니다.
이중 처리 방해 : http://www.gstatic.com/b-g/OROY9DN8QUHYUN1VED9V1QS0387EOX207713725.mp3
듀플렉스 정교 : http://www.gstatic.com/b-g/YBFPW2YQBZPVP4WONSIUO24KV82NY32653447.mp3
동기화에 응답하는 듀플렉스 : http://www.gstatic.com/b-g/ZIC83HEVAJKTZ3SBUQFEWSXTH0O7916575831.mp3

자연스러운 소리 내기 우리 는 상황에 따라
음성 (TTS) 엔진과 합성 TTS 엔진 ( Tacotron 및 WaveNet 사용 )을 결합하여 억양을 제어합니다.

또한 시스템은 말의 불투명도 (예 : "흠"및 "어")의 통합 덕분에보다 자연스럽게 들립니다. 이들은 연결 TTS에서 광범위하게 다른 사운드 유닛을 결합하거나 합성 대기를 추가 할 때 추가되어 시스템이 여전히 처리중인 자연스러운 방식으로 신호를 보낼 수 있습니다. (이것은 사람들이 생각을 수집 할 때 사람들이 자주하는 일입니다.) 사용자 연구에서, 우리는 이러한 불투명도를 사용하는 대화가 더 친숙하고 자연스럽게 들리는 것을 발견했습니다.

또한 대기 시간 이 중요합니다.사람들의 기대에 부응하기 위해 예를 들어, 사람들이 "hello?"와 같은 간단한 것을 말하면 즉각적인 응답을 기대하며 대기 시간에 더 민감합니다. 낮은 대기 시간이 필요하다는 것을 감지하면 더 빠르고 신뢰할 수있는 모델 (예 : 음성 인식 또는 종단점 지정)을 사용합니다. 극단적 인 경우 우리는 RNN을 기다리지 않고 빠른 대응을 사용합니다 (일반적으로 상대방을 완전히 이해하지 못하면 사람이 할 수있는 것처럼보다 주저스러운 응답과 결합됩니다). 이를 통해 이러한 상황에서 100ms 미만의 응답 대기 시간을 가질 수 있습니다. 흥미롭게도 어떤 상황에서는 대화를 더 자연스럽게 느낄 수 있도록 더 많은 대기 시간을 도입하는 것이 실제로 도움이된다는 사실을 발견했습니다. 예를 들어 실제로 복잡한 문장에 답하는 경우입니다.

시스템 작동
Google Duplex 시스템은 정교한 대화를 수행 할 수 있으며 인간의 개입없이 자율적으로 대부분의 작업을 완료합니다 . 시스템에는 자체 모니터링 기능이있어 자율적으로 완료 할 수없는 작업 (예 : 비정상적으로 복잡한 약속 예약)을 인식 할 수 있습니다. 이 경우 작업을 완료 할 수있는 작업자에게 신호를 보냅니다.

새로운 영역에서 시스템을 교육 하기 위해 실시간 감독 학습을 사용합니다.. 이것은 강사가 학생들이 자신의 직업을 수행 할 때 감독하고, 필요에 따라지도를 제공하고, 강사의 수준에서 과제가 수행되는 것을 확인하는 많은 분야의 교육 실습과 유사합니다. Duplex 시스템에서는 숙련 된 운영자가 강사 역할을합니다. 새로운 도메인에서 전화를 걸 때 시스템을 모니터링함으로써 필요에 따라 시스템의 동작에 실시간으로 영향을 미칠 수 있습니다. 이는 시스템이 원하는 품질 수준에서 수행 될 때까지 계속되며,이 시점에서 감독이 중단되고 시스템이 자율적으로 전화를 걸 수 있습니다.

기업 및 사용자를위한 이점
Duplex가 지원하는 약속 예약에 의존하며 아직 온라인 시스템으로 운영되지 않는 비즈니스는 Duplex를 통해 일상적인 업무를 변경하거나 직원을 교육하지 않고도 Google Assistant를 통해 예약 할 수 있습니다. Duplex를 사용하면 쉽게 취소 또는 일정을 조정할 수있는 방식으로 예정된 약속에 대해 고객에게 상기시켜 약속없는 약속을 줄일 수 있습니다.
식당에 듀플렉스 전화 : http://www.gstatic.com/b-g/5717BWTLRKCBB8JUDQ1QUA6HMC26WL238301173.mp3

또 다른 예를 들어, 고객은 휴일에 영업 시간과 같이 온라인에서 사용할 수없는 정보에 대해 문의하기 위해 비즈니스에 전화를 걸기도합니다. 듀플렉스는 영업 시간에 대해 문의하고 Google에서 온라인으로 정보를 이용할 수 있도록 비즈니스에 전화를 걸 수 있으며, 동시에 비즈니스에 수신되는 전화 수를 줄이는 동시에 모든 사람이 정보에 더 쉽게 액세스 할 수 있도록합니다. 기업은 언제나처럼 운영 할 수 있습니다. 학습 곡선이나 변경 사항이 없어이 기술의 혜택을 누릴 수 있습니다.
휴가철을 요구하는 듀플렉스 : http://www.gstatic.com/b-g/N6WGB2KL3NZCVUJAGOX3BLZRJ31BRP278409629.mp3

사용자의 경우 Google Duplex가 지원되는 작업을보다 쉽게 수행 할 수 있습니다. 전화를 걸기보다는 사용자가 Google Assistant와 상호 작용하기 만하면 사용자가 개입하지 않아도 백그라운드에서 통화가 완전히 이루어집니다.

사용자는 Google Assistant에 약속을 요청한 후 보조자가 양방향 전화로 비즈니스를 예약하도록 예약합니다.
사용자의 또 다른 이점은 Duplex가 비동기 방식으로 서비스 제공 업체와 위임 된 통신을 할 수 있다는 것입니다 (예 : 근무 시간 외 예약 또는 연결 제한). 또한 청각 장애가있는 사용자 또는 현지 언어를 사용하지 않는 사용자가 전화를 통해 작업을 수행 할 수 있도록 액세스 가능성 및 언어 장벽을 해결하는 데 도움이 될 수 있습니다.

올 여름, Google Assistant 에서 Duplex 기술을 테스트하여 사용자가 레스토랑 예약을하고, 미용실 약속을 예약하고, 전화로 휴가 시간을 잡도록 돕습니다.

Yaniv Leviathan, Google Duplex 리드, 프로젝트의 엔지니어링 관리자 인 Matan Kalman은 Duplex의 전화를 통해 예약을 받았습니다.
상기 식사 예약을위한 듀플렉스 전화 : http://www.gstatic.com/b-g/1RYL7HFNYMJUOLXWHMB4TOYIDA7YFR191723752.mp3


사람들이 서로 상호 작용할 때 자연스럽게 기술과 상호 작용할 수 있도록 허용하는 것은 오랜 약속이었습니다. Google Duplex는 특정 시나리오에서 자연스러운 대화를 통해 기술과의 상호 작용을 현실화하는 방향으로 나아갑니다. 이러한 기술 발전이 궁극적으로 컴퓨터와의 일상적인 상호 작용에서 사람들의 경험을 의미있는 향상에 기여할 수 있기를 바랍니다.



구글이 전화를 대신걸어주는 기술을 개발하여 공개했습니다  정말 대단한 기술이네요 컴퓨터의 자연어 처리 기술이 이정도로 발전했다니...

그리고 번역하면서 한번더 놀랐네요 기계번역도 정말 놀라울정도로 발전했군요

복잡한 문장을 알아들어 지속적인 대화가 가능하며 심지어 어린아이가 전화를 걸면 플리즈 등의 공손한 말투를 요구하기도 했다고 합니다

심지어 영어를 못하는 점원과도 상황에 맞게 조리있게 설명해서 예약을 받아냅니다 정말 놀랍네요

전화주문 잘 못하는 사람에게도 대박이고 청각장애인들에게도 혁신이고 활용성이 무궁무진하겠네요 정말 대단합니다

개인적으로 4차 산업혁명이 완성된 세상이 어떨지 정말 궁금하네요