AICon 上海站|日程100%上线,解锁Al未来! 了解详情
写点什么

智谱清言 App 全新升级视频通话功能,并推出新一代基座大模型

  • 2024-09-02
    北京
  • 本文字数:1480 字

    阅读完需:约 5 分钟

大小:764.27K时长:04:20
智谱清言 App 全新升级视频通话功能,并推出新一代基座大模型

近日,智谱宣布清言 App 推出“视频通话”功能,同时官宣了新一代基座大模型 GLM-4-Plus,此外还将 CogVideoX-5B 开源、GLM-4-Flash 免费。

全新的“视频通话”功能来了


清言 App 迎来“视频通话”功能,这是清言 App 继 7 月上线生成视频功能清影 Ying 后又一重大更新,也是国内首个面向 C 端开放的视频通话。


清言视频通话跨越了文本模态、音频模态和视频模态,并具备实时推理的能力。用户拨打清言的视频通话窗口,即可与它进行流畅通话,即便频繁打断它也能迅速反应。清言可以理解摄像头拍摄到的内容,可以听懂指令并准确执行。这样的体验就如同和真人视频通话一样。


下面是在游戏陪伴、作业辅导、作业辅导和一些生活场景下,清言视频通话功能的表现:


00:00 / 00:00
    1.0x
    • 3.0x
    • 2.5x
    • 2.0x
    • 1.5x
    • 1.25x
    • 1.0x
    • 0.75x
    • 0.5x
    网页全屏
    全屏
    00:00


    据悉,清言 App 视频通话功能将于 8 月 30 日上线,首批面向清言部分用户开放,同时开放外部申请。


    清影视频通话内测开通链接:https://zhipu-ai.feishu.cn/share/base/form/shrcnqpIx9q5ILEFeT2cPNhyuSf

    GLM-4-Plus 发布并上线开放平台


    GLM-4-Plus 是智谱全自研 GLM 大模型的最新版本,在语言理解、指令遵循、长文本处理等方面性能得到全面提升。


    GLM-4-Plus 使用了大量模型辅助构造高质量合成数据以提升模型性能,利用 PPO 有效有效提升模型推理(数学、代码算法题等)表现,更好反映人类偏好。


    • 语言文本能力方面,GLM-4-Plus 和 GPT4o 及 405B 参数量的 Llama3.1 相当。



    LCB: LiveCodeBench


    NCB: NaturalCodeBench


    *represents reproduced results


    • 长文本能力则通过更精准的长短文本数据混合策略,取得了更强的长文本的推理效果,比肩国际先进水平。



    • GLM-4V-Plus 还可以理解网页内容,并将其转换为 html 代码,在图像和视频理解能力方面位居前列。



    • GLM-4V-Plus 能够理解并分析复杂的视频内容,同时具备时间感知能力。


    下面是针对该视频相关问题,GLM-4V-Plus 做出的回答。


    用户:这个穿绿色衣服的球员在整个视频都做了什么?

    GLM-4V-Plus:在整个视频中,穿绿色衣服的球员在场上运球,然后跳起将球投入篮筐。

    用户:这个视频的精彩时刻是什么?发生在第几秒?

    GLM-4V-Plus:这个视频的精彩时刻发生在第 4 秒,当时穿绿色衣服的球员跳起并将球投入篮筐。



    GLM-4-Plus 现已在智谱大模型开放平台部署,企业和开发者即日起可以通过智谱开放平台 bigmodel.cn 上的 API 调用智谱最新的基座大模型。


    _GLM-4-Plus API 文档更新在:_https://bigmodel.cn/dev/api#glm-4


    _GLM-4V-Plus API 文档更新在:_https://bigmodel.cn/dev/api#glm-4v


    _MaaS 模型介绍页(包含最新模型的概要介绍):_https://bigmodel.cn/dev/howuse/model


    文生图模型升级


    文生图模型迎来最新版本 CogView-3-Plus,其效果接近目前最佳的 MJ-V6 及 FLUX 等模型,并支持图片编辑功能。





    _CogView-3-Plus 更新在::_https://bigmodel.cn/dev/api#cogview


    模型再开源


    另外,继 CogVideoX 2B 版本开源后,5B 版本也于近日正式开源,性能更强,推理显存需求最低仅为 11.4GB。同时,CogVideoX-2B 的开源协议调整为更加开放的 Apache 2.0 协议,任何企业与个人均可自由使用。


    随着 CogVideoX-5B 的开源,智谱不仅在开源模型数量上领先,累计下载量也突破 2000 万次,智谱以实际行动为国际开源社区做出自己应有贡献。


    随着技术进步、效率提升和成本优化,智谱宣布大模型开放平台 bigmodel.cn 最具性价比的大模型,GLM-4-Flash 现已完全免费,用户可以通过调用 GLM-4-Flash 快速、免费地构建专属模型和应用。这也是智谱开放平台首个完全免费的大模型 API。


    智谱表示,最新推出的基座大模型,和此前发布的 CogVideoX 等模型一道,完善了智谱自主原创的全栈大模型谱系,推动智谱实现面向世界先进水平的全面对标。


    2024-09-02 14:545681

    评论

    发布
    暂无评论
    发现更多内容

    鸿蒙开发实战:灵活定制编译选项,打造高效应用

    王二蛋和他的张大花

    鸿蒙

    鸿蒙开发实战:智能日志定位与高效调试技巧

    王二蛋和他的张大花

    鸿蒙

    利用外部数据源 JSON 管理测试:灵活的数据驱动测试方法

    测吧(北京)科技有限公司

    测试

    鸿蒙开发实战:鸿蒙应用开发中的页面管理工具类详解

    王二蛋和他的张大花

    鸿蒙

    快递鸟单号识别API接口代码流程

    快递鸟

    快递

    ETLCloud异常问题分析ai功能

    RestCloud

    人工智能 AI 数据分析 ETL 数据集成工具

    11.组合模式设计思想

    杨充

    什么是公共数据资源授权运营?

    郑州埃文科技

    公共数据

    关于虚拟仿真云实验教学_解决方案及优势介绍!

    3DCAT实时渲染

    仿真云 虚拟仿真云教学 虚拟仿真实训教学

    Pytest-ordering:自定义 Pytest 测试用例执行顺序的指南

    测吧(北京)科技有限公司

    测试

    Pytest 并行与分布式运行测试用例的实现与优化

    测吧(北京)科技有限公司

    测试

    深入理解 Fixture 作为参数使用的技巧:提升测试代码的灵活性和复用性

    测吧(北京)科技有限公司

    测试

    全面升级的“新清影”,给AI生成视频带来了哪些新玩法?

    Alter

    智源举办2024具身与世界模型专题峰会 产学研共促技术创新与产业应用

    智源研究院

    改变财务规划思维方式,迎接创新技术新时代

    智达方通

    技术创新 预算管理 财务规划

    深入理解 fixture 的作用范围:优化测试环境的管理

    测吧(北京)科技有限公司

    测试

    深入理解 yield 用法:从生成器到高级测试场景的应用

    测吧(北京)科技有限公司

    测试

    鸿蒙开发实战:轻松配置多环境目录,实现高效应用部署

    王二蛋和他的张大花

    鸿蒙

    鸿蒙开发实战:深度解析网络管理技巧与实战应用

    王二蛋和他的张大花

    鸿蒙

    Robotaxi三国杀

    脑洞汽车

    AI

    Pytest 内置插件 Hook 体系:深入了解与实践

    测吧(北京)科技有限公司

    测试

    利用外部数据源 CSV 管理测试:轻量化数据驱动测试方案

    测吧(北京)科技有限公司

    测试

    和鲸社区地球科学轻科研交流局:在这个卷来卷去的时代,我们都想要找到一些答案

    ModelWhale

    数据科学 气象 地球科学 DDE 深时数字地球 大气

    C# 单例模式的多种实现

    不在线第一只蜗牛

    JavaScript C#

    七届“全勤生”高通已经确认参加明年第八届进博会

    业界

    智谱清言 App 全新升级视频通话功能,并推出新一代基座大模型_AI&大模型_褚杏娟_InfoQ精选文章