智能体刷屏的背后,是 AI 应用拐点的来临?AICon 北京站议程重磅公布,50+ 硬核分享不容错过 了解详情
写点什么

智谱清言 App 全新升级视频通话功能,并推出新一代基座大模型

  • 2024-09-02
    北京
  • 本文字数:1480 字

    阅读完需:约 5 分钟

大小:764.27K时长:04:20
智谱清言 App 全新升级视频通话功能,并推出新一代基座大模型

近日,智谱宣布清言 App 推出“视频通话”功能,同时官宣了新一代基座大模型 GLM-4-Plus,此外还将 CogVideoX-5B 开源、GLM-4-Flash 免费。

全新的“视频通话”功能来了


清言 App 迎来“视频通话”功能,这是清言 App 继 7 月上线生成视频功能清影 Ying 后又一重大更新,也是国内首个面向 C 端开放的视频通话。


清言视频通话跨越了文本模态、音频模态和视频模态,并具备实时推理的能力。用户拨打清言的视频通话窗口,即可与它进行流畅通话,即便频繁打断它也能迅速反应。清言可以理解摄像头拍摄到的内容,可以听懂指令并准确执行。这样的体验就如同和真人视频通话一样。


下面是在游戏陪伴、作业辅导、作业辅导和一些生活场景下,清言视频通话功能的表现:


00:00 / 00:00
    1.0x
    • 3.0x
    • 2.5x
    • 2.0x
    • 1.5x
    • 1.25x
    • 1.0x
    • 0.75x
    • 0.5x
    网页全屏
    全屏
    00:00


    据悉,清言 App 视频通话功能将于 8 月 30 日上线,首批面向清言部分用户开放,同时开放外部申请。


    清影视频通话内测开通链接:https://zhipu-ai.feishu.cn/share/base/form/shrcnqpIx9q5ILEFeT2cPNhyuSf

    GLM-4-Plus 发布并上线开放平台


    GLM-4-Plus 是智谱全自研 GLM 大模型的最新版本,在语言理解、指令遵循、长文本处理等方面性能得到全面提升。


    GLM-4-Plus 使用了大量模型辅助构造高质量合成数据以提升模型性能,利用 PPO 有效有效提升模型推理(数学、代码算法题等)表现,更好反映人类偏好。


    • 语言文本能力方面,GLM-4-Plus 和 GPT4o 及 405B 参数量的 Llama3.1 相当。



    LCB: LiveCodeBench


    NCB: NaturalCodeBench


    *represents reproduced results


    • 长文本能力则通过更精准的长短文本数据混合策略,取得了更强的长文本的推理效果,比肩国际先进水平。



    • GLM-4V-Plus 还可以理解网页内容,并将其转换为 html 代码,在图像和视频理解能力方面位居前列。



    • GLM-4V-Plus 能够理解并分析复杂的视频内容,同时具备时间感知能力。


    下面是针对该视频相关问题,GLM-4V-Plus 做出的回答。


    用户:这个穿绿色衣服的球员在整个视频都做了什么?

    GLM-4V-Plus:在整个视频中,穿绿色衣服的球员在场上运球,然后跳起将球投入篮筐。

    用户:这个视频的精彩时刻是什么?发生在第几秒?

    GLM-4V-Plus:这个视频的精彩时刻发生在第 4 秒,当时穿绿色衣服的球员跳起并将球投入篮筐。



    GLM-4-Plus 现已在智谱大模型开放平台部署,企业和开发者即日起可以通过智谱开放平台 bigmodel.cn 上的 API 调用智谱最新的基座大模型。


    _GLM-4-Plus API 文档更新在:_https://bigmodel.cn/dev/api#glm-4


    _GLM-4V-Plus API 文档更新在:_https://bigmodel.cn/dev/api#glm-4v


    _MaaS 模型介绍页(包含最新模型的概要介绍):_https://bigmodel.cn/dev/howuse/model


    文生图模型升级


    文生图模型迎来最新版本 CogView-3-Plus,其效果接近目前最佳的 MJ-V6 及 FLUX 等模型,并支持图片编辑功能。





    _CogView-3-Plus 更新在::_https://bigmodel.cn/dev/api#cogview


    模型再开源


    另外,继 CogVideoX 2B 版本开源后,5B 版本也于近日正式开源,性能更强,推理显存需求最低仅为 11.4GB。同时,CogVideoX-2B 的开源协议调整为更加开放的 Apache 2.0 协议,任何企业与个人均可自由使用。


    随着 CogVideoX-5B 的开源,智谱不仅在开源模型数量上领先,累计下载量也突破 2000 万次,智谱以实际行动为国际开源社区做出自己应有贡献。


    随着技术进步、效率提升和成本优化,智谱宣布大模型开放平台 bigmodel.cn 最具性价比的大模型,GLM-4-Flash 现已完全免费,用户可以通过调用 GLM-4-Flash 快速、免费地构建专属模型和应用。这也是智谱开放平台首个完全免费的大模型 API。


    智谱表示,最新推出的基座大模型,和此前发布的 CogVideoX 等模型一道,完善了智谱自主原创的全栈大模型谱系,推动智谱实现面向世界先进水平的全面对标。


    2024-09-02 14:545736

    评论

    发布
    暂无评论
    发现更多内容

    你曾遇到过哪些大厂的-Java-面试?,mysql入门书籍哪本好

    Java 程序员 后端

    你知道你和高薪的距离在哪里吗?这份“并发编程笔记,redis分布式锁原理java

    Java 程序员 后端

    入职字节跳动那一天,我哭了(蘑菇街被裁,java中异常处理机制的原理和应用

    Java 程序员 后端

    先到先得!价值百万的的ELk+Lucene笔记,阿里P7架构师带你看透maven的来龙去脉

    Java 程序员 后端

    使用Hystrix的插件机制,解决在使用线程隔离时,threadlocal的传递问题

    Java 程序员 后端

    全网都在跪求的阿里Java修炼开发技术笔记,终于开放下载了

    Java 程序员 后端

    全网首发“Java面试考点大全”,深入linux内核架构pdf百度云

    Java 程序员 后端

    全网首发!今年的第一份Spring Boot实战派,让开发像搭积木一样简单

    Java 程序员 后端

    带你了解Node.js包管理工具:包与NPM

    华为云开发者联盟

    node.js 工具 npm 文件

    做个小项目那不是简简单单!Java实现航空航班管理系统。

    Java 程序员 后端

    全靠这份阿里大厂Java面试真题手册,让我成功拿下12家大厂offer

    Java 程序员 后端

    全靠阿里内部(珠峰版)Java面试笔记,mysql数据库教程郑阿奇答案

    Java 程序员 后端

    写了一年golang,来聊聊进程、线程与协程,javamap底层原理

    Java 程序员 后端

    作为分布式服务框架,我用大白话给你解释Zookeeper的选举机制!

    Java 程序员 后端

    你们初刷leetcode时会怀疑自己的智商吗?,java中级面试题下载

    Java 程序员 后端

    使用IDEA的Docker插件部署SpringBoot项目,让我成功在寒冬中站稳脚步

    Java 程序员 后端

    全网最全Spring面试题之基础篇整理总结(共69题,附超详细解答

    Java 程序员 后端

    全网都在跪求的阿里Java修炼开发技术笔记,终于开放下载了(1)

    Java 程序员 后端

    你知道 Java 类是如何被加载的吗?,mybatis从入门到精通pdf百度云

    Java 程序员 后端

    你确定你真的理解_双亲委派_了吗?!,阿里内部核心Java进阶手册

    Java 程序员 后端

    使用 nodejs 中的 http 模块实现几个超实用的工具,实战java虚拟机葛一鸣第二版pdf

    Java 程序员 后端

    六月份参加字节移动中台一二三面,一腔热血,终上岸,java面试设计模式的使用

    Java 程序员 后端

    你不会仅仅把Redis作为缓存的工具吧?给你一亿个keys,如何高效统计

    Java 程序员 后端

    你以为在做的是微服务?不!你只是做了个比单体还糟糕的分布式单体

    Java 程序员 后端

    你技术这么好,总要改变点什么把!(1),2021我的Java大厂面试之旅

    Java 程序员 后端

    使用Redis和Java进行数据库缓存 - DZone数据库,工作感悟

    Java 程序员 后端

    公司CTO:高性能开发,你不会Netty,java支付模块架构

    Java 程序员 后端

    你技术这么好,总要改变点什么把!,java面试项目中你遇到的难题

    Java 程序员 后端

    你遇到过哪些质量很高的 Java 面试?,nginx教程阮一峰

    Java 程序员 后端

    使用OPCAutomation实现对opc数据的访问,腾讯数据分析面试春招2021

    Java 程序员 后端

    保姆级教程!手把手带你用数据库中间件Mycat+SpringBoot完成分库分表

    Java 程序员 后端

    智谱清言 App 全新升级视频通话功能,并推出新一代基座大模型_AI&大模型_褚杏娟_InfoQ精选文章