ElevenLabs 推出自研语音转文本模型

5个月前 科技 40观看
摘要 人工智能初创公司 ElevenLabs 在最近完成 1.8 亿美元大规模融资后,又迈出了新的技术步伐。这家以音频生成技术闻名的公司推出了其首个独立的语音转文本模型 Scribe。这家估值达 33 亿美元的初

人工智能初创公司 ElevenLabs 在最近完成 1.8 亿美元大规模融资后,又迈出了新的技术步伐。这家以音频生成技术闻名的公司推出了其首个独立的语音转文本模型 Scribe。my1喜好网-记录每日喜好的科技时尚娱乐生活

这家估值达 33 亿美元的初创公司此前通过其丰富的声音库为许多公司提供语音转文本服务。如今,公司正寻求进军语音识别领域,与 Gladia、Speechmatics、AssemblyAI、Deepgram 以及 OpenAI 的 Whisper 模型展开竞争。my1喜好网-记录每日喜好的科技时尚娱乐生活

ElevenLabs 的 Scribe 模型一经推出就支持超过 99 种语言。该公司将其中 25 种语言归类为高精度类别,这些语言的词错率低于 5%。这份名单包括英语 (声称准确率达 97%)、法语、德语、印地语、印尼语、日语、卡纳达语、马拉雅拉姆语、波兰语、葡萄牙语、西班牙语和越南语。其他语言则按照词错率被分为不同等级:高等 (5% 到 10%)、良好 (10% 到 20%) 和中等 (25% 到 50%)。my1喜好网-记录每日喜好的科技时尚娱乐生活

公司表示,在 FLEURS 和 Common Voice 基准测试中,该模型在多种语言上的表现超过了 Google Gemini 2.0 Flash 和 Whisper Large V3。my1喜好网-记录每日喜好的科技时尚娱乐生活

去年,ElevenLabs 为其 AI 对话代理平台开发了语音转文本组件。但这是该公司首次发布独立的语音识别模型。在上个月与 TechCrunch 的对话中,CEO Mati Staniszewski 谈到了改进语音识别模型的计划。my1喜好网-记录每日喜好的科技时尚娱乐生活

"我们希望能更好地理解对话中你所说的内容。我们正在研究如何不仅仅局限于生成内容,而是理解和转录语音," Staniszewski 当时表示。"很多人说语音转文本是一个已解决的问题。但对于许多语言来说,效果其实很差。我们认为可以开发出更好的语音识别模型,因为我们有内部团队可以标注数据并提供快速反馈。"my1喜好网-记录每日喜好的科技时尚娱乐生活

该模型还具备智能说话人分离功能,可识别发言者身份,支持词级时间戳以实现精确字幕,并能自动标注笑声等声音事件。该公司在其工作室中提供了直接转录视频内容并添加字幕的功能。my1喜好网-记录每日喜好的科技时尚娱乐生活

Scribe 目前仅支持预录制的音频格式。公司表示将很快推出低延迟的实时版本模型。这意味着目前该模型还不适用于会议记录或语音笔记等场景。my1喜好网-记录每日喜好的科技时尚娱乐生活

ElevenLabs 为 Scribe 定价为每小时音频转录 0.40 美元。虽然这个价格具有竞争力,但其部分竞争对手目前提供更低的音频转录价格,同时在功能上有所差异。my1喜好网-记录每日喜好的科技时尚娱乐生活

展开全文
猜你感兴趣
今年双11大变样,淘宝京东不卷了!

今年双11大变样,淘宝京东不卷了!

在被电商平台造出的第16个年头,双

11-19 110阅读
研究人员开发自动识别古代楔形文字片的AI软件

研究人员开发自动识别古代楔形文

11月2

11-19 129阅读
天玑9400性能之神!iQOO Neo10系列前瞻

天玑9400性能之神!iQOO Neo10系列

今天,iQOO

11-19 108阅读
2025款宝骏悦也Plus发布:配备灵眸智驾2.0 Max,定价10.38万

2025款宝骏悦也Plus发布:配备灵眸

11-19 119阅读
灵宝 CASBOT 01 人形机器人发布:52自由度,头部配屏,获联想投资

灵宝 CASBOT 01 人形机器人发布:5

11-19 103阅读
被审判的麦琳和妖魔化的小红书

被审判的麦琳和妖魔化的小

作者 / 张   特编辑 / 朱   婷运

11-19 107阅读
这次,李庚希“底裤被扒光”,孙红雷的话,终于有人信了

这次,李庚希“底裤被扒光”

11-19 104阅读
张歆艺第一任老公竟不是袁弘,二婚竟能被宠着这样令人羡慕

张歆艺第一任老公竟不是袁

大家都很喜欢袁弘吧?不仅仅是因为

11-19 103阅读
综艺《开播!短剧季》试镜最后一役!谁能夺得《包拯与公孙策》IP试播资格?

综艺《开播!短剧季》试镜最

  国内首档“微短剧+综艺”创新真人

11-19 114阅读
《好东西》豆瓣9.1,放映时观众数次鼓掌,导演:桥段全靠硬编

《好东西》豆瓣9.1,放映时

邵艺辉自编自导,宋佳、钟楚曦、章宇、

11-19 126阅读
与柴犬开启治愈探险之旅!异世界动作冒险新游《妖怪之国》登陆Steam

与柴犬开启治愈探险之旅!异

在这个繁忙喧嚣的现代社会,我们时常渴

11-19 119阅读
TGA:DLC、拓展包、新赛季、重制版等均可提名所有奖项

TGA:DLC、拓展包、新赛季、

今日(11月16日),TGA主创Geoff Keighley与

11-19 121阅读
玩转无忧传奇行会系统,成就宏图霸业

玩转无忧传奇行会系统,成就

行会是无忧传奇中一个非常重要的组成部

11-19 120阅读
金庸群侠传3加强版古墓路线全流程详细攻略

金庸群侠传3加强版古墓路

金庸群侠传3游戏里面玩家可以自由选择

11-19 177阅读
原神失物匿于繁华任务怎么做|失物匿于繁华任务攻略

原神失物匿于繁华任务怎么

失物匿于繁华是原神须弥地区魔神主线任

11-19 128阅读