写点什么

最大参数 300 亿!阶跃星辰与吉利联合开源两款多模态大模型

  • 2025-02-19
    北京
  • 本文字数:1533 字

    阅读完需:约 5 分钟

大小:822.07K时长:04:40
最大参数300亿!阶跃星辰与吉利联合开源两款多模态大模型

2025 年 2 月 18 日,阶跃星辰和吉利汽车集团联合宣布,将双方合作的阶跃两款 Step 系列多模态大模型向全球开发者开源。其中,包含目前全球范围内参数量最大、性能最好的开源视频生成模型阶跃Step-Video-T2V,以及行业内首款产品级开源语音交互大模型阶跃Step-Audio。即日起可在跃问 APP 内体验。

 

吉利汽车集团 CEO 淦家阅表示:“吉利致力成为智能汽车 AI 科技的引领者和普及者,早在 2021 年,吉利就围绕芯片、软件操作系统、数据和卫星网搭建了端到端的自研体系和生态联盟,构建了完善的‘智能吉利科技生态网’,驱动用户在智能驾驶、智能座舱上的体验不断进化。目前,吉利全栈自研的星睿 AI 大模型已经与阶跃 Step-Video-T2V、Step-Audio 等大模型完成了深度融合,将为用户带来更智能、更高阶的座舱交互与智驾出行体验,推动 AI 科技在智能汽车领域的普及。”

 

据了解,这也是阶跃星辰首次开源其 Step 系列基座模型。阶跃星辰创始人、CEO 姜大昕博士表示:“阶跃星辰一直以实现 AGI 为目标坚持研发基座大模型。我们深知 AGI 的实现离不开全球开发者的共同努力,开源的初心,一方面是希望跟大家分享最新技术成果,为开源社区贡献一份力量;另一方面,我们相信多模态模型是实现 AGI 的必经之路,但目前尚处于早期阶段,期待与社区开发者集思广益,共同拓展模型技术边界,并推动产业落地。”

阶跃 Step-Video-T2V:300 亿参数,可直接生成高分辨率视频


阶跃 Step-Video-T2V 是目前全球范围内参数量最大、性能最好的开源视频生成大模型。阶跃 Step-Video-T2V 模型的参数量达到 300 亿,可以直接生成 204 帧、540P 分辨率的高质量视频,这意味着能确保生成的视频内容具有极高的信息密度和强大的一致性。

 

从生成效果来看,阶跃 Step-Video-T2V 在复杂运动、美感人物、视觉想象力、基础文字生成、原生中英双语输入和镜头语言等方面具备强大的生成能力,且语义理解和指令遵循能力突出,能够高效助力视频创作者实现精准创意呈现。用户可以在跃问网页端和跃问 App 上体验阶跃 Step-Video-T2V 的视频生成能力 。

 

为了对开源视频生成模型的性能进行全面评测,阶跃星辰还发布并开源了针对文生视频质量评测的新基准数据集 Step-Video-T2V-Eval。该测试集包含 128 条源于真实用户的中文评测问题,旨在评估生成视频在运动、风景、动物、组合概念、超现实、人物、3D 动画、电影摄影等 11 个内容类别上质量。



Step-Video-T2V-Eval 评测结果

 

评测结果显示,阶跃 Step-Video-T2V 的模型性能在指令遵循、运动平滑性、物理合理性、美感度等方面的表现,均显著超过市面上既有的效果最佳的开源视频模型。

 

据了解,目前在跃问网页端和跃问 App 上,都可以体验 阶跃 Step-Video-T2V 的视频生成能力 。

阶跃 Step-Audio:业内首款产品级开源语音交互模型

据阶跃星辰介绍,这款阶跃 Step-Audio 是行业内首个产品级的开源语音交互模型,能够根据不同的场景需求生成情绪、方言、语种、歌声和个性化风格的表达,能和用户自然地高质量对话。模型生成的语音具有超自然、高情商等特征,同时也能实现高质量的音色复刻并进行角色扮演,满足影视娱乐、社交、游戏等行业场景下应用需求。



在 LlaMA Question、Web Questions 等 5 大主流公开测试集中,阶跃 Step-Audio 模型性能均高于行业内同类型开源模型,取得了最高得分。阶跃 Step-Audio 在 HSK-6(汉语水平考试六级)评测中的表现尤为突出,是更懂中国话的开源语音交互大模型。



StepEval-Audio-360 基准测试


此外,由于目前行业内语音对话测试集相对缺失,阶跃星辰自建并开源了多维度评估体系 StepEval-Audio-360 基准测试,从角色扮演、逻辑推理、生成控制、文字游戏、创作能力、指令控制等 9 项基础能力的维度对开源语音模型进行全面测评。通过人工横评后的结果显示,阶跃 Step-Audio 的模型能力十分均衡,且在各个维度上均超过了此前市面上效果最佳的开源语音模型。


2025-02-19 09:484762
用户头像
李冬梅 加V:busulishang4668

发布了 1114 篇内容, 共 726.7 次阅读, 收获喜欢 1254 次。

关注

评论

发布
暂无评论

鸿蒙应用开发从入门到入行 - 篇3:ArkUI布局基础与制作可交互页面

猫林老师

鸿蒙 HarmonyOS 鸿蒙应用开发 鸿蒙原生应用开发 HarmonyOS NEXT

Splunk Enterprise 9.4 发布,新增功能概览

sysin

Splunk Enterprise

鸿蒙next中Web的使用

flfljh

鸿蒙开发:前端页面调用 ArkTS 函数全解析

flfljh

“全球金牌敏捷课程” · 12月28-29日CSM认证课程 · Jim老师引导讨论AI & Agility话题

ShineScrum

鸿蒙应用开发从入门到入行 - 篇3:ArkUI布局基础与制作可交互页面

猫林老师

鸿蒙 HarmonyOS 鸿蒙应用开发 HarmonyOS NEXT

HarmonyOs基础入门02

flfljh

鸿蒙+next+判断+Swiper+是否在最后一个元素并向右滑动与在第一个元素并向左滑动

flfljh

鸿蒙+next+使用并封装EmitterUtil

flfljh

鸿蒙ArkWeb 跨域请求

flfljh

鸿蒙+next实现页签栏平板端适配

flfljh

反向海淘与反向代购的盈利之道及代购系统建站挑战

代码忍者

代购系统 跨境独立站

鸿蒙Flutter性能调优之滑动响应时延

flfljh

鸿蒙Flutter之解析flutter相关的cppcrash堆栈

flfljh

安全架构师的自我修炼:从原则到实践

I

安全架构师 信息安全 安全设计 企业安全 安全架构设计

harmony_flutter_keyboard_visibility(监听动态键盘)

flfljh

鸿蒙+next+实现试卷计时器

flfljh

鸿蒙Flutter性能调优分析之帧渲染跟踪

flfljh

msprofiler前置知识:如何看懂tracing profile文件?

zjun

性能 debug Trace

《Django 5 By Example》阅读笔记:p614-p644

codists

Python django

harmony_flutter 实现短信发送

flfljh

harmony_flutter_orientation_plugins(监听屏幕状态插件)

flfljh

横竖屏切换开发实践

flfljh

鸿蒙+next+实现知识点列表的重复布局

flfljh

harmony_flutter_videoCompress(视频压缩)

flfljh

harmony_flutter 实现修改屏幕亮度

flfljh

harmony_flutter_更新Flutter插件项目结构

flfljh

鸿蒙JSON对象里面的Map类型的数据如何接收

flfljh

深度学习的下一站:解锁人工智能的新边界

天津汇柏科技有限公司

深度学习 AI 人工智能

第78期 | GPTSecurity周报

云起无垠

harmony_flutter 实现拨打电话功能

flfljh

最大参数300亿!阶跃星辰与吉利联合开源两款多模态大模型_生成式 AI_李冬梅_InfoQ精选文章