Meta发布 AI 模型SeamlessM4T,可转录和翻译近100种语言|钛快讯
(图片来源@视觉中国)
(相关资料图)
钛媒体App获悉,当地时间8月22日,科技巨头Facebook母公司Meta 对外发布了一款最新人工智能(AI)翻译引擎SeamlessM4T,可以更轻松地跨文本语音翻译和转录近100种语言。
同时,Meta还公布了新的开源翻译数据集 SeamlessAlign,将44.3万小时的语音与文本、2.9万小时的语音转录数据进行对齐,教会SeamlessM4T如何将语音转录为文本、翻译文本、从文本生成语音。
Meta表示,SeamlessM4T将与SeamlessAlign一同开源。SeamlessM4T代表了 AI 技术驱动的“语音到语音”和“语音到文本”领域的“重大突破”。
据悉,作为最早投资AI的大型科技企业之一,Meta于2013年成立了 AI 基础研究实验室,聘请了AI领域的顶级学者,有大量社交与元宇宙算法,推出Pytorch框架、Zion等软硬件产品。不过,虽然Meta在AI领域也取得了一些进展,但它落后于OpenAI、微软、谷歌等公司。
随着ChatGPT风靡全球,Meta AI团队正在加紧追赶,以及重新组合其关于语言、对话等领域与大模型相关的研究。
去年底之后,Meta陆续发布No Language Left Behind(不留语言)文本到文本的机器翻译模型,支持200种语言,以及开发多语言数据集SpeechMatrix、生成文本到声音的AudioCraft等。另外在今年7月,Meta还发布开源对话大模型Llama 2,引发广泛讨论和关注。
此次公布的SeamlessM4T,建立在Meta AI翻译模型的技术能力基础上,并重新设计Fairseq序列建模工具包,以创建更轻量级的模型和处理更多信息。Meta表示,SeamlessM4T从“爬取的网页数据的公开可用存储库中”收集了400万小时的“原始音频”,该模型可以在近100种语言之间进行文本到语音的翻译,并支持35种语言的完全语音到语音翻译。
对于安全性和脱敏性,Meta表示,在开发SeamlessM4T时,团队构建了一个可以识别敏感词系统,目标是能够过滤了训练数据中不平衡的数据信息,从而检测和输出正确的翻译内容。而且,Meta研究人员还尝试清理误译一些脏话的数据集,以便更准确地检测何时使用。
Meta研究科学家负责人Paco Guzman表示,SeamlessM4T的一大突破是它不依赖中间模型来产生结果,这使得它更加灵活,甚至支持动态更改语言。这将促进更多人使用其进行日程对话。
不过,Meta建议不要使用SeamlessM4T进行长篇翻译,政府专用的认证翻译,以及不鼓励出于医疗或法律目的部署该模型,原因或与专业领域的翻译准确度有关。科技网站《对话》(theconversation)最近表示,AI 翻译有许多缺陷,包括不同形式的性别错误和偏见、语音识别算法偏差等。
据报道称,Meta后续将把这些翻译和转录方面的 AI 进展,整合到Facebook、Instagram、WhatsApp、Messenger和Threads等产品当中。
(本文首发钛媒体App,作者|林志佳,编辑|马金男)
关键词:
您可能也感兴趣:
为您推荐
警方通告!这些人速来报案!
谷神星一号遥八运载火箭发射成功
AI淘金热潮起 “铲子”太贵如何破局?算力租赁模式应运而生
排行
最近更新
- Meta发布 AI 模型SeamlessM4T,可转录和翻译近100种语言|钛快讯
- 注意!英搏尔将于9月8日召开股东大会
- 河南省省长王凯与华为轮值董事长徐直军会谈
- 人瑞人才(06919.HK)上半年营收超20亿元 期内溢利达1890万元
- 中评编译:乌克兰秋冬季战事的预测
- 嘉祥县满硐镇扎实开展“学习强国”线下宣传推广活动
- 全市博物馆工作会议为何放到进化开?
- 张家界:40余名单身男女在玉皇石窟大胆追爱
- 深化数字经济合作 郴州市人民政府与中广湖南签订战略合作协议
- 国际精密(00929.HK)与中建四局安装工程签订建造合约
- 那个猪的表情包(这个猪的表情包叫什么名字)
- 云南机场集团下属企业专职外部董事王险峰接受审查调查
- 官宣!金砖+6
- 中方是否就日方水产品相关问题与日本政府直接对话?外交部回应
- 生态环境部(国家核安全局)相关负责人就日本启动福岛核污染...
- 名单公布!全国500强镇,苏州47个!
- 历城六中是重点学校吗 历城六中
- 羽绒棉和丝棉哪个更保暖 羽绒棉和丝棉的区别
- word2010怎样做答题卡 如何用word制作答题卡
- 强势股追踪 主力资金连续5日净流入70股
- A股平均股价10.32元 47股股价不足2元
- 含税不含税计算公式表 含税和不含税计算公式
- 股票行情快报:杰普特(688025)8月25日主力资金净卖出1435.52万元
- 300英雄bkb是什么装备 300英雄bkb是什么
- 股票行情快报:星环科技(688031)8月25日主力资金净卖出1382.54万元
- 股票行情快报:综艺股份(600770)8月25日主力资金净卖出405.88万元
- 长华化学(301518)周评:本周跌12.99%,主力资金合计净流出6...
- 苏州规划(301505)周评:本周跌4.42%,主力资金合计净流出1361.60万元
- 脑机接口让失语者以意念准确“发声”
- 比亚迪方程豹品牌销售总经理熊甜波是干练的女高管 曾在赵长...
今日要闻
- 爱奇艺pps下载旧版本(爱奇艺pps)
- 为建设美丽上海 年轻人可以这么做!上海推出青少年助力绿色发展实践六项行动计划
- A股平均股价10.32元 47股股价不足2元
- 臻镭科技:CX9261A、CX7442A等新产品预计今年可以产生业绩贡献
- 尽职尽责做好安保工作,为民族传统体育运动会安全有序保驾护航
- 年中报发布,中国人寿银保渠道实现快速增长
- 福蓉科技股东户数下降4.04%,户均持股47.26万元
- 居民纷纷参与“微自治”,这里的楼院充满阳光
- 长华化学(301518)周评:本周跌12.99%,主力资金合计净流出6358.93万元
- 腾讯公司副总裁、西南区总经理蔡光忠:加大和重庆各个方面的合作 共创科技美好未来