ElevenLabs Inc.由前 Google 机器学习工程师 Piotr Dąbkowski 和前 Palantir 部署策略师 Mati Staniszewski 于 2022 年共同创立，总部位于美国纽约州纽约市，Eleven Labs Inc. 是一家为创作者和出版商开发人工智能语音合成软件的研究公司。 ElevenLabs 正在研究和部署语音 AI 的新方法，公司的使命是让任何语言和声音的内容都能为所有人所用。
ElevenLabs Inc.美股百科
ElevenLabs 是一家软件公司，专门利用深度学习开发自然语音合成软件，专注于 AI 音频研究和部署。ElevenLabs 的使命是让内容以任何语言和任何声音在全球范围内普及。公司的研究团队开发了 AI 音频模型，这些模型可以生成 32 种语言的逼真、多功能且具有上下文感知能力的语音、声音和音效。ElevenLabs 的产品团队根据日常用户、产消者和企业的需求定制这些模型。
ElevenLabs 的技术用于为有声读物和新闻文章配音、为视频游戏角色制作动画、帮助电影前期制作、本地化娱乐媒体、为社交媒体和广告创建动态音频内容以及培训医疗专业人员。它还让那些失去声音的人重拾声音，并帮助日常生活中有无障碍需求的人。
ElevenLabs 主要以其基于浏览器的 AI 辅助文本转语音软件 Speech Synthesis 而闻名，该软件通过合成语音情感和语调来生成逼真的语音。公司表示，其模型经过训练可以解读文本中的上下文，并相应调整语调和节奏。它使用先进的算法分析文本的上下文特征，旨在识别愤怒、悲伤、快乐或警觉等情绪，使系统能够理解用户的情感，从而实现更真实、更具人性化的语音语调。该初创公司正申请此项技术的专利。在其测试网站上，用户可以提交文本，并通过预设的声音选择生成音频文件。付费用户可上传自定义语音样本，通过公司的语音克隆工具创建新的语音风格。
Voice Library 是公司用于分享通过其 Voice Design 技术创建的独特语音配置文件的功能。这些预设的语音配置文件允许用户选择最适合其需求的声音，而无需从头开始创建。目前库中已有超过 1,000 个由社区创建的声音。另一款名为 VoiceLab 的工具，允许用户通过少量音频片段克隆语音，并创建全新的合成语音。
2023年6月20日，ElevenLabs 发布了一款名为 AI Speech Classifier 的 AI 识别工具，公司称这是同类产品中的首创。该工具可通过 API 访问，旨在确定上传的音频样本是否来自 ElevenLabs 的专有 AI 技术。公司表示有意与其他 AI 开发者合作，创建可被行业广泛采用的通用检测系统。
2023年7月，ElevenLabs 宣布推出 “Projects”，这是一款用于创建长篇语音内容（如有声书和上下文相关的对话段落）的工具，支持合成或自定义语音。该工具于9月发布。同年8月，ElevenLabs 将其语音生成能力扩展至28种语言。通过自研 AI 模型，系统可自动识别韩语、荷兰语、越南语等语言，从而实现“情感丰富”的多语种语音生成。公司还宣布其技术正式结束测试阶段。
2023年10月，ElevenLabs 推出了 “AI Dubbing”，一款能够将语音翻译成超过20种语言的工具。该功能通过专有方法，在处理噪声去除、说话人区分、转录和同步翻译语音与原始音频等任务时，保留了说话人的原始声音、情感和语调。
2024年5月，ElevenLabs 推出了文本转音乐模型。2024年6月，ElevenLabs 在 iOS 和 Android 平台发布了 ElevenLabs Reader App，用户可以使用 AI 语音在手机上收听文章、PDF 和 ePub 文件。2024年7月，ElevenLabs 发布了 “Voice Isolator”，该功能可去除音频中的背景噪音。
ElevenLabs Inc. 产品和技术
1、语音合成（Speech Synthesis）
ElevenLabs 的核心产品是基于浏览器的 AI 辅助文本转语音软件。该技术通过合成语音情绪和语调，解读文本上下文，调整语调和节奏，从而生成逼真的语音。它支持检测愤怒、悲伤、快乐或惊慌等情绪，使语音更加真实、更像人类。
2、语音实验室（VoiceLab）
VoiceLab 是一款工具，可让用户从音频短片段中克隆声音并创建全新的合成声音。用户可以上传自定义声音样本，使用该公司的语音克隆技术创建新的声音风格。
3、语音库（Voice Library）
语音库功能允许用户分享和选择 1,000 多个社区创建的独特语音配置文件。这些预先设计的语音配置文件可用于代替从头开始创建语音。
4、AI配音工作室（AI Dubbing Studio）
AI 配音工具于 2023 年 10 月发布，可将语音翻译成 20 多种语言，同时保留原始说话者的声音、情绪和语调。它采用专有方法进行降噪、说话者区分、转录以及将翻译后的语音与原始音频同步。
5、Projects
该工具于 2023 年 9 月推出，支持创建长篇口语内容，例如具有上下文感知合成或自定义声音的有声读物和对话片段。它提供了一个类似于 Google Docs 的用户友好界面，用于音频创建。
6、人工智能语音分类器（AI Speech Classifier）
AI 语音分类器于 2023 年 6 月推出，旨在确定上传的音频样本是否源自 ElevenLabs 的专有 AI 技术。该公司旨在与其他 AI 开发人员合作创建一个通用检测系统。
7、多语言支持（Multilingual Support）
ElevenLabs的技术支持32种语言的语音生成，可以自动检测语言并生成“情感丰富”的多语言语音。
8、语音隔离器（Voice Isolator）
语音隔离器工具于 2024 年 7 月发布，可消除音频中的背景噪音，提高生成的语音的质量。
9、文本到音乐模型（Text-to-Music Model）
该型号于 2024 年 5 月推出，允许用户通过文本输入生成音乐，进一步扩展了公司的音频生成能力。
10、ElevenLabs 阅读器应用程序（ElevenLabs Reader App）
该应用程序自 2024 年 6 月起在 iOS 和 Android 上推出，允许用户在移动设备上收听带有 AI 生成的声音的文章、PDF 和 ePub。
11、对话式人工智能（Conversational AI）
ElevenLabs 还推出了一个对话式 AI 平台，允许用户构建能够低延迟、完全可配置和无缝可扩展地说话的 AI 代理。该平台集成了语音转文本、LLM（大型语言模型）集成、文本转语音和其他功能。
ElevenLabs 的技术应用于各个领域，包括：
- 为有声读物和新闻文章配音
- 为视频游戏角色制作动画
- 协助电影前期制作
- 娱乐媒体本地化
- 为社交媒体和广告创建动态音频内容
- 培训医疗专业人员
- 让失声者重拾声音
- 帮助有无障碍需求的个人
ElevenLabs Inc. 历史百科
ElevenLabs 由前谷歌机器学习工程师 Piotr Dąbkowski 和前 Palantir 部署策略师 Mati Staniszewski 于 2022 年共同创立。两人都在波兰长大，据报道，他们创立 ElevenLabs 的灵感来自观看配音不充分的美国电影。
Dąbkowski 和 Staniszewski 最初考虑了不同的融资选择，包括与初创企业加速器合作的可能性。2023 年 1 月，他们透露已获得 200 万美元的种子前融资。这家初创公司专注于人工智能语音智能，这是欧洲仍在兴起的领域，在吸引投资者方面发挥了重要作用。种子前融资主要由 Credo Ventures 领投，Concept Ventures 参投。
2023 年 1 月，ElevenLabs 公开发布了其测试版平台。
2023 年 6 月，ElevenLabs 以约 1 亿美元的估值完成了 1900 万美元的 A 轮融资，尽管该公司没有办公室，只有 15 名员工。本轮融资由风险投资公司 Andreessen Horowitz、前 GitHub 首席执行官 Nat Friedman 和企业家 Daniel Gross 共同领投。 SV Angel、Mike Krieger（Instagram 联合创始人）、Brendan Iribe（Oculus 联合创始人）、Mustafa Suleyman（Deepmind 联合创始人）和 Tim O'Reilly（O'Reilly Media 创始人）等知名人士也参与其中。 还宣布 Andreessen Horowitz 将加入 ElevenLabs 董事会。
2024 年 1 月 22 日，ElevenLabs 在 B 轮融资中又筹集了 8000 万美元，使公司的总估值达到 11 亿美元。此轮融资由 Andreessen Horowitz、Friedman、Gross 和 Sequoia Capital 领投。此外，该公司还宣布了一系列新产品，包括语音市场、AI 配音工作室和移动应用程序。
ElevenLabs Inc. 融资百科
2023年1月，ElevenLabs Inc. 完成200万美元种子轮融资，由Credo Ventures领投，Concept Ventures和Alex Macdonald（个人）跟投。
2023年6月，ElevenLabs Inc. 完成1900万美元A轮融资，由 Andreessen Horowitz、Daniel Gross 和 Nat Friedman 领投，SV Angel、Credo Ventures、Guillermo Rauch（个人）等跟投。
2024年1月，ElevenLabs Inc. 完成8000万美元B轮融资，由 Andreessen Horowitz、Daniel Gross 和 Nat Friedman 领投，Sequoia Capital、SV Angel、Credo Ventures 等跟投。
2024年2月，ElevenLabs Inc. 获得迪士尼旗下 Disney Accelerator 非股权捐助。
ElevenLabs Inc. 美股投资
非上市公司，公司官网，等待ElevenLabs Inc. IPO上市。
评论