ElevenLabs는 어떻게 영화 더빙에서 음성 AI 플랫폼으로 확장했나 [영상]

29 minutes ago 1

ElevenLabs는 오디오 모델을 직접 연구하고, 그 기술을 고객의 실제 업무에 적용해 성장함. 영화 더빙에서 출발해 콘텐츠 제작과 콜센터 음성 에이전트로 확장함 출발점은 감정과 원래 목소리를 보존하는 더빙이었지만, 기술적 한계와 창작자에게 당장 필요한 작업을 확인한 뒤 고품질 음성 생성부터 해결함 연구는 오디오에 집중하고, 제품에는 외부 LLM과 지식, 시스템 연동을 결합함. 장기적으로 연구 격차가 줄어들 가능성에 대비해 제품과 음성 마켓플레이스도 구축함 소규모 자율 팀과 제품팀 소속 현장 엔지니어(FDE) 가 고객과 함께 문제를 해결하고, 현장에서 배운 것을 다른 고객도 쓸 수 있는 제품 기능으로 만듦 음성을 AI와 소통하는 주요 인터페이스로 보고, 인간의 감정과 대화 방식을 이해하는 기술을 지향함. 인수 제안을 거절하고 독립 기업으로 성장할 계획임 더빙에서 시작해 음성 생성으로 좁힌 문제 Mati Staniszewski와 Piotr는 15년간 친구로 지냈으며, 2022년 첫 창업으로 ElevenLabs를 시작함 당시 관심이 암호화폐와 메타버스에 쏠려 있어 AI 연구에 집중할 수 있었음 Mati는 수학을 공부하고 BlackRock에서 위험 모델을, Palantir에서 최적화 모델과 고객 배포를 담당함 Palantir에서는 코로나19 대응을 위한 영국 NHS의 백신 배분, 석유와 가스 산업의 에너지 최적화 등을 수행함 Piotr는 Google에서 지식 그래프용 텍스트 모델을 연구했고, 이전에는 대학에서 이미지 모델을 연구함 폴란드 영화 더빙이 창업의 계기였음 남녀 등장인물 모두를 한 명의 내레이터가 읽어 감정과 억양이 사라지는 방식이 어린 시절부터 2021년까지 이어지고 있었음 저렴하고 빠르지만 경험의 질이 낮았으며, 원래 목소리와 감정, 억양을 다른 언어에서도 보존하고 싶었음 인터뷰 시점 일주일 전에는 이 작업을 매우 잘 수행하는 모델을 출시함 초기부터 언어 장벽을 넘는 콘텐츠 시장의 가능성을 크게 봤음 스트리밍, TV, 대화 등 모든 이야기를 현지 언어의 오디오로 전달할 수 있다고 생각함 정적 콘텐츠에서 상호작용형 경험으로 이동할 가능성은 예상했지만, 변화 속도까지 알지는 못했음 《The Hitchhiker’s Guide to the Galaxy》의 Babel fish처럼 서로 다른 언어로도 이해하는 경험을 목표 중 하나로 삼음 기술적 병목과 고객 요구가 만난 첫 제품 더빙은 전사, 번역, 다른 언어로 ...

Read Entire Article




피플앤툴즈 네트워크
🛍 샵