清华大学联合字节跳动解锁通用听觉人工智能 SALMONN大语言模型发布
2023-08-23 18:28:36 PConline原创


【资料图】

【太平洋科技资讯】8月22日消息,近日,清华大学电子工程系与字节跳动火山语音团队联手,推出了一款名为SALMONN的开源大语言模型,这意味着任何人都可以使用它来构建自己的听觉人工智能应用,从而推动听觉人工智能的发展和应用。

据了解,SALMONN模型具有强大的功能和广泛的应用范围。它不仅支持语音、音频以及音乐输入,还能感知和理解各种类型的音频内容输入。更为出色的是,SALMONN模型还具备多语言语音识别和翻译以及语音推理等功能。

官方表示,SALMONN模型的能力远不止于此。它能够胜任英语语音识别、英语到中文的语音翻译、情感识别、音频字幕生成、音乐描述等重要的语音和音频任务。而且,SALMONN模型在训练过程中,还展现出了许多未曾专门学习过的多语言和跨模态能力。这些能力包括非英语语音识别、英语到中文以外其他语言的语音翻译、对语音内容的摘要和关键词提取、基于音频的故事生成、音频问答、语音和音频联合推理等任务。

开源这个模型意味着,全世界的开发者、研究者都可以使用和改进这个模型,推动听觉人工智能技术的发展。同时,这也将推动相关行业的发展,比如智能语音助手、自动语音翻译、语音内容生成等。此外,这也显示出中国在人工智能领域的研究实力,特别是在语音和听觉人工智能方面的领先地位。

目前,SALMONN模型已经在GitHub上发布,官方还提供了项目的Demo链接,供广大用户和开发者参考和学习。这无疑为语音和音频技术的发展开辟了新的道路,也为广大用户提供了更为丰富和便捷的服务。对此,我们充满期待,也相信SALMONN模型将在未来的发展中,发挥出更大的作用。

热门推荐

文章排行

  1. 2023-08-23清华大学联合字节跳动解锁通用听觉人工智能 SALMONN大语言模型发布
  2. 2023-08-231-0!阿森纳开局2连胜,闯入英超前3,厄德高破门,日本国脚染红
  3. 2023-08-23百度自动驾驶业务快速增长 机构看好万亿市场空间
  4. 2023-08-23Meta推出可转录和翻译近百种语言的AI模型
  5. 2023-08-23安徽省马鞍山市2023-08-23 06:13发布大雾橙色预警
  6. 2023-08-23ESR(01821.HK)公布中期业绩:资产管理规模继续增长 拟派第三次中期股息每股12.5港仙
  7. 2023-08-23纳思达:公司及其部分珠海本地子公司在美国提起诉讼并申请禁令
  8. 2023-08-23中式糕点市场大浪淘沙,传统企业如何保有一席之地?
  9. 2023-08-23送餐时得知孩子跳楼崩溃痛哭?骑手本人回应
  10. 2023-08-23是什么意思中文翻译视频(∠是什么车?)
  11. 2023-08-23恒大内控报告曝光,摘牌倒计时?
  12. 2023-08-2328分钟必达、迟就赔:途虎养车升级“途虎闪电侠”上门更换蓄电池服务
  13. 2023-08-23苹果注册【菠萝】商标,又一次被骂上热搜!
  14. 2023-08-23爆冷!上海海港2-3不敌巴吞联,疑似弃亚冠保冠军?
  15. 2023-08-23折叠屏手机出货量大涨:三星第一华为第二 摩托罗拉罗暴增2135%
  16. 2023-08-23“爱卡数字人” 开创汽车资讯数字化服务先河
  17. 2023-08-23兴业科技:公司控股子公司宏兴汽车皮革目前有供应问界M5增程和纯电车型的内饰皮革
  18. 2023-08-23华宇软件:与中国移动的战略合作持续加深 正着力加强本地合作
  19. 2023-08-23央视:频繁上演的“抹黑小作文”扰乱资本市场正常秩序 投资一定擦亮双眼
  20. 2023-08-23贵州省人民政府关于李明、杨凌志任免职的通知