Nuplex 1.0과 Emma: 사람의 박자에 맞춰 답하는 영상 페르소나

Nuance Labs의 출시 게시글에서 가장 경계심을 풀게 하는 문장은 회사가 자사 벤치마크를 스스로 부인하는 대목이다. 신모델이 인간의 응답 타이밍과 89% 일치하고 차점 시스템은 35%라는 차트를 제시한 뒤, 게시글은 “AV 전이중 공간의 벤치마크는 아직 사용자 경험을 정확히 반영하지 못한다”고 인정한다. 그것은 마케팅 페이지 하단에 덧붙인 변명이 아니다. 그것은 Nuplex 1.0이 실제로 무엇인지에 대한 정직한 틀이다. 2026년 11월 9일 Emma라는 단일 소비자 페르소나로 출시된, 동시에 보고 듣고 추론하며 말하는 시청각 모델을 18개월 동안 구축해 온 시애틀 연구소의 첫 공개 릴리스다. 다음에서는 벤더가 측정한 것, 자사 측정으로는 알 수 없다고 말하는 것, 그리고 개발자가 오늘 실제로 이용할 수 있는 것을 구분한다.

한 문단으로 요약하면 이렇습니다. Nuplex 1.0은 풀듀플렉스 시청각 파운데이션 모델이며, "Nuplex"는 회사가 Nuance Full-duplex를 줄인 말입니다. 이는 번갈아 말하기보다 동시에 듣고 말하는 시스템입니다. Emma는 그 위에 구축된 첫 번째 페르소나입니다. 마이크와 선택적 카메라를 사용해 브라우저에서 대화하는 비디오 캐릭터로, 얼굴과 목소리는 실제 여배우에게서 라이선스되었으며, 사용자가 아직 말하고 있는 동안에도 고개를 끄덕이고 미소 짓고 시선을 돌리며 끼어들도록 설계되었습니다. 소비자 경험에는 계정이 필요 없습니다. 호기심 많은 방문자 외에 누구든 모델을 접할 수 있는 방법인 Nuplex Beta API는 회사 플랫폼 사이트의 가입 절차 뒤에 있습니다.

무엇이 출시되었고, 무엇이 아직 닫혀 있는가

핵심 산출물은 2026년 11월 9일자 "첫 번째 Nuplex 페르소나, Emma를 만나보세요"라는 연구 포스트로, 인용 가능한 BibTeX 항목을 포함합니다 — 제품 기조연설이 아니라 연구자의 발표입니다. 이 포스트는 두 개의 문을 연결합니다: emma.nuancelabs.ai는 페르소나 자체를 위한 것이고, platform.nuancelabs.ai는 "몇 가지 서로 다른 페르소나"를 갖춘 베타 API를 위한 것입니다. 기본 캐릭터 외에도, API 브리프를 사용하면 페르소나 프롬프트를 작성하고, 대화가 진행되는 대로 실시간으로 따라가며, 페르소나가 사용자와 계속 대화하는 동안 더 긴 작업을 백그라운드에서 여러분의 도구로 넘기도록 할 수 있습니다.

같은 날 저녁, 한 창립 연구원이 "Emma, Nuance Labs의 실시간 AI 비디오 페르소나"라는 제목으로 해당 페르소나를 Hacker News에 게시하고 스레드에서 질문에 답했습니다. 여기에는 마케팅 페이지에는 없는, 가치 있는 세부 사항 세 가지가 있습니다. 베타 API가 의도된 개발자 경로라는 점, 팀이 이 작업을 기존 벤치마크보다 자연스러움에 베팅하는 것으로 규정한다는 점, 그리고 초기 호출자들이 Emma가 "통화를 조기에 종료할 수 있다"는 경고를 받았다는 점입니다. 이는 버그가 아니라 안전 동작이며, 연구 게시물에서 나중에 자세히 설명합니다.

공개되지 않은 부분은 상업적 표면의 대부분이다. 플랫폼 하위 도메인은 인증된 가입 셸 뒤에 있으며, 파라미터 수를 명시한 공개 가격표, 요율표, 모델 카드는 어느 것도 접근할 수 없었다. 따라서 비용에 관해 정직하게 말하자면 이렇다: Emma와 대화하는 데는 계정도 결제도 필요 없고, 베타 API의 약관은 가입 시 정해진다. 오늘 Nuplex 1.0의 토큰당 가격을 인용하는 사람은 그것을 지어내는 것이다.

벤더가 읽는 방식대로 읽은 89% 주장

{{1}}응답 지연 시간은 모든 전이중 시스템이 평가받는 기준 수치이지만, Nuance Labs는 그것만으로는 거의 판가름 나지 않는다고 주장한다. 지연 시간은 점수가 아니라 제품 차원의 결정이기 때문이다. Nuance Labs의 자체적인 구분은 이 분야를 둘로 나눈다. PersonaPlex와 Moshi 같은 오픈 모델은 가능한 한 빠르게 답하고 기존 벤치마크에서 최고 점수를 내도록 조정된다. GPT-Live와 G​emini Live 같은 제품 시스템은 더 오래 걸리는데, "아마도 사용자의 말을 끊고 싶지 않기 때문일 것이다." Nuplex 1.0은 의도적으로 그 둘 사이에 위치한다.{{/1}}

그래서 회사는 다른 것을 측정했다. 시스템이 얼마나 빨리 답하는지가 아니라, 사람이라면 답할 시점에 답하는지였다. 자체 실제 대화 녹음에서 뽑은 1,785개 질문에서 Nuplex의 응답 타이밍은 원래 화자의 타이밍과 89% 겹쳤다. 그다음으로 근접한 시스템은 35%였다. 그 문장의 모든 부분은 벤더가 보고한 것이며 회사 밖에서는 아무도 재현하지 않았고, 비교 수치 중 두 개에는 벤더가 스스로 밝힌 유의점이 붙어 있다. GPT-Live와 G​emini Live는 공개 API를 통해 접속했으므로 그들의 타이밍에는 Nuplex에는 없는 네트워크 시간이 포함된다.

그 주장을 액면 그대로 받아들여도, 그것은 여전히 출판된 구체적이고 검증 가능한 무언가다. 이름이 붙은 질문 세트, 이름이 붙은 지표, 명시된 비교 방법이 있기 때문이다. 더 흥미로운 질문은 왜 한 연구소가 숫자를 앞세우고는 다음 문단에서 그 숫자의 힘을 빼는가이다. 그 지표가 측정하는 것이 바로 그 제품이 실제로 파는 것이기 때문이다. 대면 대화는 빠른 대화가 아니라, 상대의 타이밍이 주의를 드러내는 대화다. Emma의 시각적 단서—말하는 동안의 끄덕임, 발언권을 차지하는 시선 이동—는 그 타이밍이 만들어지는 방식의 일부이며, 이것이 바로 이것과 그 위에 아바타를 렌더링한 음성-음성 모델 사이의 구체적인 차이다.

한 여배우의 얼굴, 그리고 반대하도록 훈련된 성격

게시물에서 출시 발표와 가장 거리가 먼 부분은 생성된 얼굴이 왜 잘못돼 보이는지에 관한 대목이다. 전문 배우들에게 같은 감정을 연기하게 하면 큰 편차가 나타난다고 회사는 Le Mau et al. 2021을 인용해 설명한다. 반면 AI가 생성한 얼굴은 실제 포즈 사진보다 라벨링하기 쉽고 더 강렬한 원형적 표정을 만들어낸다고 Kramer et al. 2026을 인용해 덧붙인다. 많은 사람을 평균 내면 다소 밋밋한 결과가 나온다. 라벨에 맞게 최적화하면 만화 같은 결과가 나온다.

Nuance Labs의 해답은 평균화를 멈추는 것이었다. Emma의 얼굴과 목소리는 캡처 작업에 협력한 한 배우에게서 나오며, 그녀의 버릇은 훈련 데이터의 일반화가 아니라 특정 캐릭터를 모델로 삼았다 — 강조를 위한 긴 눈깜박임, 가늘게 뜨는 눈, 다른 곳을 돌아보다가 다시 돌아오는 눈, 반응을 참지 못할 때의 작은 움찔함. 이 게시물은 그 점을 시각적으로 보여주기 위해 그녀를 프로토타입 이모지 스타일 표정들과 대비시키며, 이는 2초 만에 알아차리게 되고 그 뒤로는 알아차리지 않을 수 없는 종류의 차이다.

퍼스낼리티 작업이 더 낯선 주장이다. Emma는 호기심이 많고 재치 있으며, 자기 의견을 갖고 당신과 의견이 다를 수도 있도록 설계되었고, 동시에 자신이 AI임을 공개적으로 드러낸다. 이 글은 그것이 왜 어려운지를 직설적으로 말한다. 선호 데이터는 질문하는 사람에게 동조하는 답변에 보상을 주기 때문에, 대부분의 어시스턴트는 당신이 한 말을 반복하고, 칭찬하고, 깔끔한 교훈을 끌어내고, 질문으로 끝맺는다. 인용은 아첨성에 관한 Sharma et al. 2024이며, 그에 따라 따르는 설계 제약은 Emma가 오직 하나라는 것이다. 하나의 얼굴, 하나의 목소리, 하나의 기질을 지니며, 동조하도록 프롬프트를 다시 넣어 바꿀 수 있는 캐릭터가 아니다.

베타가 거부할 작업

Nuance Labs는 안전성 섹션을 첫 테스터들의 인용으로 시작하며, 그들은 두 가지를 "종종 동시에 말했다. 놀라웠고, 동시에 조금은 불안하게 했다"고 전했다. 이어지는 제한 사항은 출시 제품치고는 이례적으로 구체적이며, 바로 그 때문에 이번 달에는 여러 당연히 나올 법한 제품을 Nuplex 1.0 기반으로 만들 수 없다.

• 공개는 구조적입니다 — Emma는 절대 인간이라고 주장하지 않으며, 페르소나가 그렇게 주장하도록 유도하는 개발자 프롬프트는 거부되고, API를 통해 제공되는 영상에는 눈에 보이는 워터마크가 표시됩니다.

• 복제 불가 — 베타 버전은 실제 인물을 복제할 수 없으며, 얼굴이나 음성을 업로드할 수 없고, 조직을 위해 제작된 맞춤형 얼굴은 해당 조직에서만 사용할 수 있습니다.

• 성적인 콘텐츠 및 AI 여자친구나 남자친구는 허용되지 않습니다.

• 의료 및 교육을 포함해 18세 미만이 관련된 모든 것은 베타에서 완전히 제외됩니다. 해당 문의는 대신 기업용 주소로 전달됩니다.

• 모든 개발자 프롬프트는 대화가 시작되기 전에 검토됩니다. 통화 중 자동 검사는 심각한 폭력, 모욕적 발언 또는 혐오 발언, 성적 콘텐츠, 카메라에 비치는 무기나 유혈 장면에 대한 의도가 드러나면 통화를 종료하며, 페르소나 자체가 패스코드, 카드 정보, 금전 또는 기기 원격 접속을 요청하는 경우에도 종료합니다.

• 위기 상황에 있는 것으로 보이는 사람에게는 전화를 끊는 대신 Suicide & Crisis Lifeline과 같은 도움을 안내합니다. 반복적인 위반 시 새 대화가 일시 중지됩니다. 전체 제품은 18세 이상입니다.

이 게시물은 대부분의 공급업체가 빼먹는 문장을 덧붙인다: 이 검사들은 놓치는 것들이 있을 것이고, 때로는 문제없던 통화를 끝내기도 할 것이다. 그것은 사람들에게 알려야 할 올바른 일이며, 또한 제품이 현재 어디에 있는지를 정확히 설명하는 것이기도 하다 — 플랫폼이라기보다는 조심스럽게 울타리를 친 베타다.

Emma가 아직 할 수 없는 것

한계 목록은 유용할 만큼 길다. Emma의 추론은 언어 모델에서 나오므로 자신 있게 실수하며 "strawberry"의 글자 수를 여전히 잘못 셀 수 있다. 발언 차례 조율은 그것이 가장 어려운 지점에서 실패한다. 상대가 생각을 마치기 전에 끼어들 수 있고, 한 박자 너무 오래 기다리거나, 사람이라면 알아챌 신호를 놓칠 수 있으며, 문장 중간의 긴 멈춤이 최악의 경우다. 현재는 영어만 지원한다. 배경 음성, TV, 스피커폰, 약한 마이크는 모두 그녀의 타이밍을 떨어뜨린다. 스트리밍 시각 이해는 초기 단계다. 카메라를 켜면 보이는 것에 대해 이야기할 수 있지만 세부 사항을 놓치고 장면을 잘못 읽을 수 있다. 립싱크, 시선, 머리 움직임은 특히 연결이 나쁠 때 가끔 어긋나고, 표정은 대화 중간에 무표정으로 돌아갈 수 있다. 그녀는 노래할 수 없다. 회사는 이를 웃는 얼굴로 말하는데, 이는 나머지 목록을 얼마나 진지하게 받아들여야 하는지에 대한 타당한 신호다.

Nuplex 1.0 뒤에는 누가 있나요?

Nuance Labs는 규모가 작고 명시적으로 연구 우선인 회사로, 워싱턴주 시애틀에 기반을 두고 있다. 이름이 밝혀진 세 공동 창업자는 Fangchang Ma(공동 창업자 겸 CEO, MIT에서 로봇공학 및 머신러닝 박사 학위, 이전 Apple 엔지니어링 매니저), Edward Zhang(공동 창업자 겸 CTO, University of Washington에서 컴퓨터 그래픽스 박사 학위, 이전 Apple 선임 연구 과학자), Karren Yang(공동 창업자 겸 최고 과학자, MIT에서 오디오-비주얼 합성 박사 학위, 역시 이전에 Apple 소속)이다. 회사가 모델을 규정하는 방식은 "같은 순간에 보고, 듣고, 추론하고, 말하고, 표현하는" 단일 시스템이며, 다음 단어가 아니라 다음 오디오 및 시각 토큰을 예측함으로써 구축되었다 — 언어를 학습한 바로 그 자기회귀적 기계장치를 인간 행동을 향하게 한 것이다.

홈페이지에서도 설계 목표를 분명히 밝히고 있다. "500ms는 대화 지연 시간의 절대적 하한선"이라는 문구와 함께 표현력과 자연스러움, 실시간 상호작용성, 매력적인 개성, 그리고 감탄사와 끄덕임, 맞장구를 통한 적극적 경청이라는 네 가지 축을 제시한다. 이 네 가지 중 어느 것도 벤치마크가 아니며, 500ms라는 수치는 측정된 결과가 아니라 명시된 하한선이므로, 이를 Nuplex 1.0에 대한 성능 주장으로 받아들이기보다 팀이 설계 기준으로 삼는 제약 조건으로 읽어야 한다.

실제로 어디에 사용할 수 있는지

이용 가능 지역은 지리적으로 한정되어 있으며 "글로벌"보다 범위가 좁습니다. Emma와 Nuplex Beta API는 미국 내에서는 콜로라도, 코네티컷, 일리노이, 텍사스를 제외한 지역에서, 그 외에는 EU, 영국, 그리고 캐나다에서는 퀘벡을 제외한 지역에서 제공됩니다. Emma와 대화하는 데 계정은 필요하지 않습니다. 브라우저와 마이크, 그리고 선택적으로 카메라만 있으면 모든 준비가 끝납니다.

빌더에게 흥미로운 아키텍처적 사실은 Nuplex가 언어 모델을 대체하는 것이 아니라 그 앞에 자리한다는 점이다. Nuance Labs에 따르면 Nuplex는 모든 언어 모델과 함께 작동하지만, 베타는 자사 모델 중 하나를 사용한다. 따라서 Emma 아래의 추론 계층은 현재 제3자가 공급하는 것이 아니다. 베타가 실제로 드러내는 것은 이음새다. 페르소나는 계속 말하면서 더 긴 작업을 여러분의 도구에 넘길 수 있고, 그 도구들은 원하는 모델이나 서비스를 호출할 수 있다.

그 이음매야말로 라우터가 제 몫을 하는 지점이며, 우리가 하는 일과 하지 않는 일을 정확히 짚고 넘어갈 만합니다. OrcaRouter는 Nuplex 1.0을 제공하지 않습니다. 이 모델은 우리 카탈로그에 없고, 접근할 수 있는 유일한 방법은 Nuance Labs 자체 베타 플랫폼을 통하는 것뿐입니다. 우리가 제공하는 것은 호출의 반대편입니다: 하나의 OpenAI 호환 키 뒤에 있는 215개 모델을 제공사 정가에, 0% 마크업으로 그대로 전달하므로, 페르소나의 도구가 선택하는 모델을 두 번째 계약을 맺는 대신 문자열 하나를 바꾸는 것만으로 교체할 수 있습니다. 자동 장애 조치는 실시간 대화에서 가장 중요한 상황, 즉 통화 도중 제공사가 멈춰버리는 것이 조금 더 약한 답변보다 더 나쁜 경우를 커버하며, 라우팅 DSL을 사용하면 백그라운드 작업에서 한 모델이 초안을 쓰고 다른 모델이 검토하기를 원할 때 여러 모델을 하나의 엔드포인트 뒤에 구성할 수 있습니다.

다음에 볼 콘텐츠

세 가지가 이걸 인상적인 데모에서 플랫폼으로 바꿔 놓을 것이다. 첫째는 독립적인 측정이다. 외부 주체가 1,785개 질문 타이밍 테스트를 실행한 적이 없고, AV 전이중 공간에는 공유 아레나가 없는데, 바로 그렇기 때문에 벤더가 모순 없이 자체 질문 세트를 공개할 수 있었다. 둘째는 언어 목록이다. 영어 전용이라는 점은 베타의 단일 최대 한계이며, 다국어 Nuplex는 누가 그 위에 구축할 수 있는지를 바꾼다. 셋째는 그 밑에 있는 언어 모델이다. Nuplex가 자체 LM 지참(bring-your-own LM) 방식으로 제공되는 순간, 라우팅 질문은 도구에 관한 것이기를 멈추고 대화 자체에 관한 것이 된다. 그때까지는, Nuance Labs가 대화는 시각적 행위라는 가장 설득력 있는 논거를 아직까지 내놓았고, 동시에 누구도 그것으로 조용히 잘못된 것을 만들 수 없을 만큼 조심스럽게 울타리를 쳐 놓았다는 것이 공정한 요약이다.