写点什么

智谱清言 App 全新升级视频通话功能,并推出新一代基座大模型

  • 2024-09-02
    北京
  • 本文字数:1480 字

    阅读完需:约 5 分钟

大小:764.27K时长:04:20
智谱清言 App 全新升级视频通话功能,并推出新一代基座大模型

近日,智谱宣布清言 App 推出“视频通话”功能,同时官宣了新一代基座大模型 GLM-4-Plus,此外还将 CogVideoX-5B 开源、GLM-4-Flash 免费。

全新的“视频通话”功能来了


清言 App 迎来“视频通话”功能,这是清言 App 继 7 月上线生成视频功能清影 Ying 后又一重大更新,也是国内首个面向 C 端开放的视频通话。


清言视频通话跨越了文本模态、音频模态和视频模态,并具备实时推理的能力。用户拨打清言的视频通话窗口,即可与它进行流畅通话,即便频繁打断它也能迅速反应。清言可以理解摄像头拍摄到的内容,可以听懂指令并准确执行。这样的体验就如同和真人视频通话一样。


下面是在游戏陪伴、作业辅导、作业辅导和一些生活场景下,清言视频通话功能的表现:


00:00 / 00:00
    1.0x
    • 3.0x
    • 2.5x
    • 2.0x
    • 1.5x
    • 1.25x
    • 1.0x
    • 0.75x
    • 0.5x
    网页全屏
    全屏
    00:00


    据悉,清言 App 视频通话功能将于 8 月 30 日上线,首批面向清言部分用户开放,同时开放外部申请。


    清影视频通话内测开通链接:https://zhipu-ai.feishu.cn/share/base/form/shrcnqpIx9q5ILEFeT2cPNhyuSf

    GLM-4-Plus 发布并上线开放平台


    GLM-4-Plus 是智谱全自研 GLM 大模型的最新版本,在语言理解、指令遵循、长文本处理等方面性能得到全面提升。


    GLM-4-Plus 使用了大量模型辅助构造高质量合成数据以提升模型性能,利用 PPO 有效有效提升模型推理(数学、代码算法题等)表现,更好反映人类偏好。


    • 语言文本能力方面,GLM-4-Plus 和 GPT4o 及 405B 参数量的 Llama3.1 相当。



    LCB: LiveCodeBench


    NCB: NaturalCodeBench


    *represents reproduced results


    • 长文本能力则通过更精准的长短文本数据混合策略,取得了更强的长文本的推理效果,比肩国际先进水平。



    • GLM-4V-Plus 还可以理解网页内容,并将其转换为 html 代码,在图像和视频理解能力方面位居前列。



    • GLM-4V-Plus 能够理解并分析复杂的视频内容,同时具备时间感知能力。


    下面是针对该视频相关问题,GLM-4V-Plus 做出的回答。


    用户:这个穿绿色衣服的球员在整个视频都做了什么?

    GLM-4V-Plus:在整个视频中,穿绿色衣服的球员在场上运球,然后跳起将球投入篮筐。

    用户:这个视频的精彩时刻是什么?发生在第几秒?

    GLM-4V-Plus:这个视频的精彩时刻发生在第 4 秒,当时穿绿色衣服的球员跳起并将球投入篮筐。



    GLM-4-Plus 现已在智谱大模型开放平台部署,企业和开发者即日起可以通过智谱开放平台 bigmodel.cn 上的 API 调用智谱最新的基座大模型。


    _GLM-4-Plus API 文档更新在:_https://bigmodel.cn/dev/api#glm-4


    _GLM-4V-Plus API 文档更新在:_https://bigmodel.cn/dev/api#glm-4v


    _MaaS 模型介绍页(包含最新模型的概要介绍):_https://bigmodel.cn/dev/howuse/model


    文生图模型升级


    文生图模型迎来最新版本 CogView-3-Plus,其效果接近目前最佳的 MJ-V6 及 FLUX 等模型,并支持图片编辑功能。





    _CogView-3-Plus 更新在::_https://bigmodel.cn/dev/api#cogview


    模型再开源


    另外,继 CogVideoX 2B 版本开源后,5B 版本也于近日正式开源,性能更强,推理显存需求最低仅为 11.4GB。同时,CogVideoX-2B 的开源协议调整为更加开放的 Apache 2.0 协议,任何企业与个人均可自由使用。


    随着 CogVideoX-5B 的开源,智谱不仅在开源模型数量上领先,累计下载量也突破 2000 万次,智谱以实际行动为国际开源社区做出自己应有贡献。


    随着技术进步、效率提升和成本优化,智谱宣布大模型开放平台 bigmodel.cn 最具性价比的大模型,GLM-4-Flash 现已完全免费,用户可以通过调用 GLM-4-Flash 快速、免费地构建专属模型和应用。这也是智谱开放平台首个完全免费的大模型 API。


    智谱表示,最新推出的基座大模型,和此前发布的 CogVideoX 等模型一道,完善了智谱自主原创的全栈大模型谱系,推动智谱实现面向世界先进水平的全面对标。


    2024-09-02 14:545343

    评论

    发布
    暂无评论
    发现更多内容

    Java 程序性能优化“学习日记”

    Java 编程 面试 IT 计算机

    Spring Boot 实战派,让开发像喝水一样简单!

    Java 程序员 架构 面试 IT

    Java测试框架九大法宝

    FunTester

    自动化测试 JUnit 测试框架 selenium testNG

    面试进阶齐飞!霸榜GitHub的 Java 全栈笔记太香了!

    Java 编程 程序员 IT 计算机

    “助力金九银十”25 大Java后端面试指南,3000道面试题解析

    Java 编程 程序员 面试 IT

    清爽视频编辑器 Tech Support

    凌天一击

    全面到哭!BAT内部Java求职面试宝典,应届生必须人手一份

    Java~~~

    Java 面试 微服务 多线程 架构师

    987页的Java面试宝典,看完才发现,应届生求职也没那么难

    Java~~~

    Java 面试 微服务 多线程 架构师

    低代码开发平台的出现会是开发者的威胁吗

    雯雯写代码

    开发者 低代码 低代码开发平台

    Tensor:Pytorch神经网络界的Numpy

    华为云开发者联盟

    神经网络 数组 PyTorch Numpy Tenso

    惠及百万用户 医保“上云”有了新思路

    云计算

    毕业六年本科,去年疫情期间备战二个月,阿里巴巴四面成功!定级 P7

    Java 程序员 架构 面试 IT

    渣本全力以赴33天,四面阿里妈妈(淘宝联盟),拿下实习岗offer

    公众号_愿天堂没有BUG

    Java 编程 程序员 架构 面试

    2021 年主要网络安全威胁,及时发现提早规避风险

    九河云安全

    spring cloud 在国内中小型公司能用起微服务来吗?

    Java 程序员 架构 面试 IT

    一文搞懂指标采集利器 Telegraf

    尔达Erda

    学习 微服务 开发者 云原生 插件开发

    凭借一份“面试真经pdf”,我四面字节跳动,拿下1-2级offer

    公众号_愿天堂没有BUG

    Java 编程 程序员 架构 面试

    高频面试题-请把Java垃圾回收器说清楚

    Java 编程 架构 面试 JVM

    xposed 入门之修改手机 IMEI

    Qunar技术沙龙

    android 程序员 App 经验分享 安卓

    使用Micronaut框架构建一个微服务网络.

    Java 编程 架构 面试 程序人生

    又一里程碑!阿里首推Java技术成长笔记,业内评级“钻石级”

    Java~~~

    Java redis spring 面试 架构师

    社招三面阿里“落榜”,幸获内推名额,4面揽下美团offer

    公众号_愿天堂没有BUG

    Java 编程 程序员 架构 面试

    算法有救了!GitHub 上神仙项目手把手带你刷算法,Star 数已破500k

    Java 编程 程序员 面试 算法

    2021 斩获 90K 月薪的 Spring 全家桶:文档 + 面试题 + 学习笔记 + 思维导图

    编程 架构 微服务 IT 计算机

    经验分享:我是如何拿下微软、滴滴、百度等 20家大厂的 Offer?

    Java 程序员 架构 面试 IT

    读完SpringBoot,Cloud,Nginx与Docker技术,我拿到了阿里offer

    公众号_愿天堂没有BUG

    Java 编程 程序员 架构 面试

    28天读完349页,这份阿里面试通关手册,助我闯进字节跳动

    Java~~~

    Java 面试 算法 多线程 架构师

    为什么安全性在托管中变得越来越重要

    九河云安全

    经过两年努力,我终于进入腾讯(PCG事业群4面总结)

    公众号_愿天堂没有BUG

    Java 编程 程序员 架构 面试

    百分点科技参加MIT数智未来创新峰会 入选产业数字化生态图谱

    百分点科技技术团队

    终于有人把“SpringCloudAlibaba学习笔记”整理出来了

    Java 程序员 架构 微服务 计算机

    智谱清言 App 全新升级视频通话功能,并推出新一代基座大模型_AI&大模型_褚杏娟_InfoQ精选文章