(图片来源@视觉中国)
【资料图】
钛媒体App获悉,当地时间8月22日,科技巨头Facebook母公司Meta 对外发布了一款最新人工智能(AI)翻译引擎SeamlessM4T,可以更轻松地跨文本语音翻译和转录近100种语言。
同时,Meta还公布了新的开源翻译数据集 SeamlessAlign,将44.3万小时的语音与文本、2.9万小时的语音转录数据进行对齐,教会SeamlessM4T如何将语音转录为文本、翻译文本、从文本生成语音。
Meta表示,SeamlessM4T将与SeamlessAlign一同开源。SeamlessM4T代表了 AI 技术驱动的“语音到语音”和“语音到文本”领域的“重大突破”。
据悉,作为最早投资AI的大型科技企业之一,Meta于2013年成立了 AI 基础研究实验室,聘请了AI领域的顶级学者,有大量社交与元宇宙算法,推出Pytorch框架、Zion等软硬件产品。不过,虽然Meta在AI领域也取得了一些进展,但它落后于OpenAI、微软、谷歌等公司。
随着ChatGPT风靡全球,Meta AI团队正在加紧追赶,以及重新组合其关于语言、对话等领域与大模型相关的研究。
去年底之后,Meta陆续发布No Language Left Behind(不留语言)文本到文本的机器翻译模型,支持200种语言,以及开发多语言数据集SpeechMatrix、生成文本到声音的AudioCraft等。另外在今年7月,Meta还发布开源对话大模型Llama 2,引发广泛讨论和关注。
此次公布的SeamlessM4T,建立在Meta AI翻译模型的技术能力基础上,并重新设计Fairseq序列建模工具包,以创建更轻量级的模型和处理更多信息。Meta表示,SeamlessM4T从“爬取的网页数据的公开可用存储库中”收集了400万小时的“原始音频”,该模型可以在近100种语言之间进行文本到语音的翻译,并支持35种语言的完全语音到语音翻译。
对于安全性和脱敏性,Meta表示,在开发SeamlessM4T时,团队构建了一个可以识别敏感词系统,目标是能够过滤了训练数据中不平衡的数据信息,从而检测和输出正确的翻译内容。而且,Meta研究人员还尝试清理误译一些脏话的数据集,以便更准确地检测何时使用。
Meta研究科学家负责人Paco Guzman表示,SeamlessM4T的一大突破是它不依赖中间模型来产生结果,这使得它更加灵活,甚至支持动态更改语言。这将促进更多人使用其进行日程对话。
不过,Meta建议不要使用SeamlessM4T进行长篇翻译,政府专用的认证翻译,以及不鼓励出于医疗或法律目的部署该模型,原因或与专业领域的翻译准确度有关。科技网站《对话》(theconversation)最近表示,AI 翻译有许多缺陷,包括不同形式的性别错误和偏见、语音识别算法偏差等。
据报道称,Meta后续将把这些翻译和转录方面的 AI 进展,整合到Facebook、Instagram、WhatsApp、Messenger和Threads等产品当中。
(本文首发钛媒体App,作者|林志佳,编辑|马金男)
关键词:
Meta发布 AI 模型SeamlessM4T,可转录和翻译近100种语言|钛快讯
(图片来源@视觉中国)钛媒体App获悉,当地时间8月22日,科技巨头Faceb
23年08月23日 34:45
据中国铁路微信公众号消息,自8月22日起,铁路部门进一步优化完善12306
23年08月23日 32:03
2023年8月23日,科隆展开幕典礼上,扎克·施耐德带来了他的原创电影《
23年08月23日 39:10
前7月全球二手船交易量1364艘,二手油船价格稳步上升,克拉克森数据显示
23年08月23日 31:36
培训机构违规销售大课包 家长维权遭遇退费难 近两万元学费只能退一半?
位于西咸万象城的“灰姑娘”国际儿童艺术中心市民反映:近日,市民阮女
23年08月23日 36:17
中国大陆的暴雨预警颜色等级分为蓝色、黄色、橙色、红色四种颜色,其中
23年08月23日 37:02
大兴调查研究|宝山区大场镇:探索优化承重墙隐患治理“发现—处置—执法—预防”全流程
调查研究是获得真知灼见的源头活水,是做好各项工作的基本功,大兴调查
23年08月23日 27:38
今天佳肖财经网就给我们广大朋友来聊聊mylove信用卡,以下关于的观点希
23年08月23日 33:20
“离离暑云散,袅袅凉风起。”今天(8月23日)迎来处暑节气,处暑的
23年08月23日 25:37
遍地开花 比亚迪7月豪夺多国新能源汽车销冠:这一车型最受欢迎
遍地开花比亚迪7月豪夺多国新能源汽车销冠:这一车型最受欢迎
23年08月23日 29:00
《装甲核心6境界天火》发售宣传片公开,将于8月25日正式推出
IT之家8月23日消息,经过漫长沉寂,3D机甲动作游戏系列最新作《装甲核
23年08月23日 34:49
爱奇艺热度排行榜TOP10! 《七时吉祥》打不进前50,《莲花》第八《苍兰》第四
去年虞书欣、王鹤棣主演的古装仙侠剧《苍兰诀》爆火后,今年爱奇艺又祭
23年08月23日 28:53
来为大家解答以上的问题。下一代防火墙,防火墙在哪里打开这个很多人还
23年08月23日 31:46
1 湾仔:新旧并存;2 海洋公园;3 迪士尼乐园:童话王国;4 旺角:购物
23年08月23日 17:48
实锤!村上春树、史蒂芬·金盗版书成训练数据,AI 巨头无一幸免
AI新浪潮观察10minread实锤!村上春树、史蒂芬·金盗版书成训练数据,A
23年08月23日 30:32
央视网消息:为促进高校毕业生就业,各地还通过生活补贴、人才驿站、政
23年08月23日 30:03
通过pe工具来加载iso镜像,可以为没有配备光驱的电脑进行加载iso镜像以
23年08月23日 28:22
中国宏桥(01378):业绩拐点或将兑现 高股息优质龙头配置价值凸显
全球规模最大的电解铝生产商中国宏桥(01378)交出了一份符合市场预期
23年08月23日 25:57
1 它被使用,发音为zéyòng,一个中文单词。2 它意味着金钱支出。文章
23年08月23日 15:15
兰花科创:8月22日融资净买入437.38万元,连续3日累计净买入795.09万元
8月22日,兰花科创(600123)融资买入920 54万元,融资偿还483 16万元
23年08月23日 19:58
2023-08-23 19:27
2023-08-23 19:29
2023-08-23 19:28
2023-08-23 19:19
2023-08-23 19:17
2023-08-23 19:14