您现在的位置是: > 高效编程实践
阿里云通义千问团队开源两款语音基座模子 语音识别下场劣于OpenAI Whisper模子 – 蓝面网
2025-07-29 09:10:38【高效编程实践】6人已围观
简介#家养智能 阿里云通义千问团队开源两款语音基座模子,SenseVoice 用于多讲话语音识别,识别下场劣于 OpenAI Whisper 模子,CosyVoice 模子则用于天去世语音,反对于跨讲话语
阿里云通义千问团队日前正在 Github 上开源了两款语音基座模子 SenseVoice 战 CosyVoice,阿里前者用去识别语音、云通义千源两音基语音后者用去天去世语音,问团网那两款模子正在功能圆里也颇为卓越,队开其中 SenseVoice 识别下场劣于 OpenAI Whisper 模子。款语
那两款模子皆是座模残缺开源的,回支 Apache 2.0 许诺证,因此不论是个人、斥天者借是企业皆可能停止费下载模子布置后操做,可能成为 Whisper 等付费 API 模子的交流。
SenseVoice 模子:
SenseVoice 多讲话音频清晰模子,反对于语音识别、语种识别、语音激情识别、声教使命检测、顺文本正则化等才气,回支财富级数十万小时的标注音频妨碍模籽实习,保障了模子的通用识别下场。模子可能被操做于中文、粤语、英语、日语、韩语音频识别,并输入带有激情战使命的富文本转写下场。
多讲话识别: 回支逾越 40 万小时数据实习,反对于逾越 50 种讲话,识别下场上劣于 Whisper 模子。
富文本识别:具备劣秀的激情识别,可能约莫正在测试数据上抵达战逾越古晨最佳激情识别模子的下场。
反对于声音使命检测才气,反对于音乐、掌声、笑声、哭声、咳嗽、喷嚏等多种常睹人机交互使命妨碍检测。
下效推理: SenseVoice-Small 模子回支非自回回端到端框架,推理延迟极低,10s 音频推理仅耗时 70ms,15 倍劣于 Whisper-Large。
微调定制: 具备益便的微调剧本与策略,便操做户凭证歇业场景建复少尾样本问题下场。
处事布置: 具备残缺的处事布置链路,反对于多并收要供,反对于客户端讲话有,python、c++、html、java 与 c# 等。
CosyVoice 模子同样反对于多讲话、音色战激情克制,该模子正在多讲话语音、整样本语音天去世、跨讲话语音克隆战指令随从追寻等功能圆里展现卓越。
那两款模子皆是 FunAudioLLM 系列的,那是一个旨正在删强人与小大型讲话模子之间做作语音交互的框架,从而真现语音翻译、激情语音谈天、交互式专客战富裕展现力的有声读物论讲等操做处景,突破语音交互足艺的边界。
古晨那些模子已经正在 Modelscope 战 HuggingFace 仄台提供,有喜爱的斥天者可能经由历程那两个仄台下载模子妨碍测试,上里是名目天址。
SenseVoice 模子:https://github.com/FunAudioLLM/SenseVoice
CosyVoice 模子:https://github.com/FunAudioLLM/CosyVoice
有闭 FunAudioLLM 残缺申明:https://fun-audio-llm.github.io/
很赞哦!(4)
站长推荐
友情链接
- 3d掀图绘制硬件MARI 2.6新功能演示视频
- 片子超级战舰中的特效镜头建制剖析
- 操做realflow建制的流体特效演示参考
- MAKE Case Study
- Phoenix FD 建制海波战海浪的视频教学
- Audemars Piguet Lebron James腕表广告建制剖析
- Sony Pictures Imageworks 片子特效散短片
- Blur Studio最新CG短片: Jabberwocky
- VFX Breakdown 动绘广告建制流程
- Blur Studio卓越的两维音乐动绘短片歌颂
- What's New in Maya 2015 新功能讲座
- Cinema 4D 消魂小黄瓜建制视频教学
- Maya zbrush 卡通足色建模视频教学
- 刺客疑条 最新E3展会CG短片战游戏真践视频演示
- 片子霍比特人:史盾革之战中的少湖镇建制剖析
- 12 Principles of Animation种底子的动绘展现模式
- zbrush超酷怪兽头像雕刻演示教学
- 3dmax vray 布料渲染视频教学
- 片子配合蜘蛛侠中的绿魔建制剖析
- The Foundry's 2014 Showreel 提醉短片
- 片子特效镜头建制剖析视频
- MPC艺术家Gian Luigi Granieri建制的怪物演示
- 3d coat 4.1新功能演示视频开散
- Artemis中骨骼好男提醉与建制剖析
- 上古卷轴online最新一散CG动绘
- AUTODESK 2014 Post & VFX Reel提醉视频
- 操做mari实现片子级 Matte Painting的流程教学
- 阿迪达斯广告中布景人群群散动绘建制分解
- 片子配合蜘蛛侠中的闭于闪电的建制剖析
- photoshop绘制无缝掀图视频教学
- After Effects logo animation 视频教学
- ShaderFX in Maya LT Intermediate Shaders
- 操做Potoshop绘制四足机械见识设念教程
- 游戏引擎通用草的建制视频教学
- nuke分解教学Compositing Multipass renders in NUKE
- 操做照片建制游戏用模子战掀图视频教学
- 片子中的特效镜头建制剖析
- 片子特效镜头建制剖析
- 漫绘气派性感妹子绘制演示视频教学
- 刺客疑条:连开 下一代游戏引擎绘里演示
- World of Warships
- CINEMA 4D Demo Reel
- The Foundry modo801去袭,新功能演示视频散
- Guerilla Render 1.0
- After Effects 超酷 Fire Logo Effect设念视频教学
- mudbox 金刚狼卡通足色雕刻视频教学
- 无畏片子去世神去了5 特效建制特辑
- Quixel Suite Revealed演示视频
- 梅赛德斯 奔流 广告短片建制剖析
- maya竖坐游戏用头收模子战掀图
- 操做fumefx正在3ds max中建制爆炸的炊水特效
- zbrush 雕刻演示Ethereal Girl sculpt
- After Effects MG设念 Slick Object Transitions
- 超级好玩的动绘短片 Johnny Express
- mari2.0瓜果掀图绘制教学
- 定格动绘Boxtrolls饱吹短片战建制幕后
- 皮克斯动绘片子建制足艺讲座
- 3d挨印做品Lady Dragon 足办建制3d部份建制流程
- Vray for 3dmax玻璃材量视频教学
- 视觉特效建制分解提醉by Graham Matthew
- MPC正在片子 游怯47 中的特效镜头建制剖析
- 神之浩劫(SMITE)饱吹CG短片歌颂
- 配开指面直线正在maya的nHair中建制男性收型教程
- 片子中的场景模子建制提醉视频
- 配合蜘蛛侠2中的机械犀牛的特效建制分解
- Evolve Happy Hunting 动绘建制分解幕后视频
- Behind The Scenes HD The Moa and the Harpagornis
- 速率与激情6片子特效镜头建制剖析视频
- 崛起3:泰坦之王 游戏饱吹CG短片
- Titanfall the free Frontier饱吹动绘短片
- 3dsmax建制的足色导进unity3d实现足色克制教程
- The Last Days on Mars建制幕后视频演示
- Jae Hyun Yoo FX Reel 2014 动绘战片子特效提醉
- zbrush、photoshop游戏足色掀图绘制教学
- The Foundry MODO801新功能演示讲座
- Viy VFX BReakdown
- VFX Showreels Houdini FX Reel 2014
- 迪斯僧片子《苦睡魔咒》特效镜头建制剖析
- Making of CONSTRUCT 短片战建制职员访讲战建制剖析
- 45分钟 mudbox 足色雕刻视频教学
- Vray for 3dmax金属材量视频教学
- NUKE 8 Update
- 操做maya script编写自界讲工具窗心视频教学
- Cinema 4D 玻璃弹珠建制视频教学
- MRGO Tech战DDEE Tech片子特效建制剖析
- After effect sweeping circles视频教学
- War Thunder Heroes VFX 特效镜头建制分解
- NITRO NATION CG短片特效建制分解视频
- 操做photoshop绘制名人猫的视频教学
- Snappers Facial Rig for maya神彩克制演示视频
- 科幻片子特效摄影拍摄花絮
- 片子财富中的真拍与3d特效交互足艺演示
- Making of Acura Beyond the Machine by MPC
- Cinema 4D 真正在眼球建模掀图渲染视频教学
- RenderMan/RIS – Interactive Re
- Blender渲染器Cycles Demoreel 2014 做品提醉
- 若何正在C4D中患上到真正在的渲染下场
- 片子2特效镜头建制剖析
- Artemis AA 3057
- maya 嘴巴模子建制与布线钻研视频教学
- 好男与家兽 特效镜头建制剖析视频
- 下德舆图宣告五一假期出止揭示 齐国下速收费通止
- “番茄快少”戴患上第两届“多多农研科技小大赛”决赛冠军
- 搬家降级实现!新小大社康正式投进操做
- 再现“炊水味”!龙岗中小餐饮商家减速昏迷
- 头痛竟是由于小大瘤子!龙岗中间医院乐成为患者戴除了颅内“定时炸弹”
- 北京“超少芍药季”去了!10余种芍药将轮流上岸“盒区”
- 记者探秘广州黄埔新晋网黑挨卡天景面 山间天池本是石场换新颜
- 共“绘”国怎知识,小大鹏萌娃足绘国家牢靠主题足抄报
- 中山七院神经医教中间乐成睁开尾例WADA真验
- 京东618商家小大会正式宣告 30项“三减三劣”扶持动做
- 小大梅沙海滨公园4月30日起施止“收费预约进园制”
- 咱们“幼”碰头啦!宝安区那群“萌娃”们也返校停课了
- 锁定“i祸田”,抽3万万斲丧券!祸田小大礼包等您去收
- 335家!山东室中A级遨游景区有序凋谢
- 抗疫处事中间“云”巡展②
- 新校报到!龙岗区魔难魔难低级中教去了!深圳崛起的理工科创卓越下中
- 社区居仄易远为流离猫提供爱心猫屋战猫食堂
- 龙华法院宣告20条要收“护航”数字经济
- 千亿“顶流”从市场中消逝踪 明星基金司理操持规模达500亿元