速来报名!AICon北京站鸿蒙专场~ 了解详情
写点什么

智谱清言 App 全新升级视频通话功能,并推出新一代基座大模型

  • 2024-09-02
    北京
  • 本文字数:1480 字

    阅读完需:约 5 分钟

大小:764.27K时长:04:20
智谱清言 App 全新升级视频通话功能,并推出新一代基座大模型

近日,智谱宣布清言 App 推出“视频通话”功能,同时官宣了新一代基座大模型 GLM-4-Plus,此外还将 CogVideoX-5B 开源、GLM-4-Flash 免费。

全新的“视频通话”功能来了


清言 App 迎来“视频通话”功能,这是清言 App 继 7 月上线生成视频功能清影 Ying 后又一重大更新,也是国内首个面向 C 端开放的视频通话。


清言视频通话跨越了文本模态、音频模态和视频模态,并具备实时推理的能力。用户拨打清言的视频通话窗口,即可与它进行流畅通话,即便频繁打断它也能迅速反应。清言可以理解摄像头拍摄到的内容,可以听懂指令并准确执行。这样的体验就如同和真人视频通话一样。


下面是在游戏陪伴、作业辅导、作业辅导和一些生活场景下,清言视频通话功能的表现:


00:00 / 00:00
    1.0x
    • 3.0x
    • 2.5x
    • 2.0x
    • 1.5x
    • 1.25x
    • 1.0x
    • 0.75x
    • 0.5x
    网页全屏
    全屏
    00:00


    据悉,清言 App 视频通话功能将于 8 月 30 日上线,首批面向清言部分用户开放,同时开放外部申请。


    清影视频通话内测开通链接:https://zhipu-ai.feishu.cn/share/base/form/shrcnqpIx9q5ILEFeT2cPNhyuSf

    GLM-4-Plus 发布并上线开放平台


    GLM-4-Plus 是智谱全自研 GLM 大模型的最新版本,在语言理解、指令遵循、长文本处理等方面性能得到全面提升。


    GLM-4-Plus 使用了大量模型辅助构造高质量合成数据以提升模型性能,利用 PPO 有效有效提升模型推理(数学、代码算法题等)表现,更好反映人类偏好。


    • 语言文本能力方面,GLM-4-Plus 和 GPT4o 及 405B 参数量的 Llama3.1 相当。



    LCB: LiveCodeBench


    NCB: NaturalCodeBench


    *represents reproduced results


    • 长文本能力则通过更精准的长短文本数据混合策略,取得了更强的长文本的推理效果,比肩国际先进水平。



    • GLM-4V-Plus 还可以理解网页内容,并将其转换为 html 代码,在图像和视频理解能力方面位居前列。



    • GLM-4V-Plus 能够理解并分析复杂的视频内容,同时具备时间感知能力。


    下面是针对该视频相关问题,GLM-4V-Plus 做出的回答。


    用户:这个穿绿色衣服的球员在整个视频都做了什么?

    GLM-4V-Plus:在整个视频中,穿绿色衣服的球员在场上运球,然后跳起将球投入篮筐。

    用户:这个视频的精彩时刻是什么?发生在第几秒?

    GLM-4V-Plus:这个视频的精彩时刻发生在第 4 秒,当时穿绿色衣服的球员跳起并将球投入篮筐。



    GLM-4-Plus 现已在智谱大模型开放平台部署,企业和开发者即日起可以通过智谱开放平台 bigmodel.cn 上的 API 调用智谱最新的基座大模型。


    _GLM-4-Plus API 文档更新在:_https://bigmodel.cn/dev/api#glm-4


    _GLM-4V-Plus API 文档更新在:_https://bigmodel.cn/dev/api#glm-4v


    _MaaS 模型介绍页(包含最新模型的概要介绍):_https://bigmodel.cn/dev/howuse/model


    文生图模型升级


    文生图模型迎来最新版本 CogView-3-Plus,其效果接近目前最佳的 MJ-V6 及 FLUX 等模型,并支持图片编辑功能。





    _CogView-3-Plus 更新在::_https://bigmodel.cn/dev/api#cogview


    模型再开源


    另外,继 CogVideoX 2B 版本开源后,5B 版本也于近日正式开源,性能更强,推理显存需求最低仅为 11.4GB。同时,CogVideoX-2B 的开源协议调整为更加开放的 Apache 2.0 协议,任何企业与个人均可自由使用。


    随着 CogVideoX-5B 的开源,智谱不仅在开源模型数量上领先,累计下载量也突破 2000 万次,智谱以实际行动为国际开源社区做出自己应有贡献。


    随着技术进步、效率提升和成本优化,智谱宣布大模型开放平台 bigmodel.cn 最具性价比的大模型,GLM-4-Flash 现已完全免费,用户可以通过调用 GLM-4-Flash 快速、免费地构建专属模型和应用。这也是智谱开放平台首个完全免费的大模型 API。


    智谱表示,最新推出的基座大模型,和此前发布的 CogVideoX 等模型一道,完善了智谱自主原创的全栈大模型谱系,推动智谱实现面向世界先进水平的全面对标。


    2024-09-02 14:545238

    评论

    发布
    暂无评论
    发现更多内容

    二叉树的详细实现(含递归展开图)

    lovevivi

    c 数据结构 10月月更

    【web 开发基础】PHP 快速入门(8)-PHP 运算符之逻辑运算符详解

    迷彩

    逻辑运算符 10月月更 web开发基础 PHP基础

    “程”风破浪的开发者|Web3用合约让利润分配更公平

    石云升

    区块链 Web3.0 10月月更 “程”风破浪的开发者

    阿里也没想到14年后“互联网寒冬”这个词还能火

    雨果

    MySQL 中文分词原理

    乌龟哥哥

    10月月更

    分享5个可能用得上的JavaScript 库

    devpoint

    JavaScript i18n

    golang中的nil接收器

    六月的

    golang nil

    举三反一,一通百通的“数学脑”是怎样炼成的?

    图灵教育

    数学 科普

    使用Java实现BMI指数测试

    魏铁锤

    10月月更

    Jib构建镜像问题从定位到深入分析

    程序员欣宸

    Docker 10月月更 Jib

    曾国藩正面与侧面2

    dfuru

    从事数字化转型的你,搞清楚这些数据类基础理念了吗

    雨果

    数据中台 数据仓库 数据湖

    极客时间运维进阶训练营第一周作业

    chenmin

    Nginx多方面调优策略

    乌龟哥哥

    10月月更

    1:安装、连接以及配置-MySQL

    Yeats_Liao

    数据库 后端 10月月更

    2022-10-23:给你一个整数数组 nums 。如果 nums 的一个子集中, 所有元素的乘积可以表示为一个或多个 互不相同的质数 的乘积,那么我们称它为 好子集 。 比方说,如果 nums =

    福大大架构师每日一题

    算法 rust 福大大

    1024@程序员:图灵社区福利来了,请本人签收

    图灵社区

    程序员节

    谈谈电商系统中的商品模块设计

    乌龟哥哥

    10月月更

    极客时间 - 运维进阶训练营 - 第一周作业

    dog_brother

    Docker 镜像 linux namespace

    C4D2023取消永久许可?Maya推出精简版?你不能错过的7个CG软件资讯...

    Renderbus瑞云渲染农场

    CG Renderbus瑞云渲染 渲染软件更新

    容器和单机容器编排入门与实战

    poseidom

    ,docker Docker 镜像

    2:数据库的基本操作-MySQL

    Yeats_Liao

    数据库 后端 10月月更

    1024@程序员:图灵社区福利来了,请本人签收

    图灵教育

    程序员节

    举三反一,一通百通的“数学脑”是怎样炼成的?

    图灵社区

    数学

    【资损】资损防控的系统规范-内部接口类设计

    小明Java问道之路

    架构 微服务 安全 10月月更 资损

    决胜 AI 金融新赛道!Python Quants 创始人分享宝贵 AI 算法交易经验

    图灵社区

    人工智能

    Java之面向对象

    魏铁锤

    10月月更

    3:表的基本操作-MySQL

    Yeats_Liao

    数据库 后端 10月月更

    决胜AI金融新赛道!Python Quants 创始人分享宝贵 AI 算法交易经验

    图灵教育

    人工智能

    类型转化问题

    魏铁锤

    10月月更

    Go 语言入门很简单:Go 使用 Redis

    宇宙之一粟

    redis Go 语言 10月月更

    智谱清言 App 全新升级视频通话功能,并推出新一代基座大模型_AI&大模型_褚杏娟_InfoQ精选文章