HarmonyOS开发者限时福利来啦!最高10w+现金激励等你拿~ 了解详情
写点什么

Slack 是如何使用 WebRTC 的?

  • 2017-09-18
  • 本文字数:1810 字

    阅读完需:约 6 分钟

Slack 是一家线上协作工具,提供聊天群组、工具集成、文件整合等功能,同时,它提供 Web 和桌面、移动客户端,覆盖了主流平台。2016 年,Slack 采用 WebRTC 技术实现了应用内的音视频通话功能。Slack 视频组高级主管工程师 Raj Kumar 将参加 9 月 21 日至 22 日在北京举行的 2017RTC 实时互联网大会,并将做主题演讲。InfoQ 对其进行了采访,了解 WebRTC 在 Slack 的使用。

WebRTC 本身是一组技术的集合,基本上考虑到了音视频通话的方方面面,但是要把它用起来也并不容易。要自建 WebRTC 服务,除了要考虑信令服务器和 NAT 防火墙穿透外,在多人通话中你还需要考虑用选择发送单元(SFU)或多点控制单元(MCU)来控制通话信息路由。Slack 在其工程博客介绍,它采用了 Janus 来作为自建的 SFU,同时进行了大量的性能优化。这只是 WebRTC 应用开发中的其中一例。

受访嘉宾介绍

Raj Kumar, Slack 视频组高级主管工程师。毕业于卡内基梅隆大学电子工程专业,WebRTC 视频编解码专家,全栈工程师,擅长多媒体领域数字信号处理。先后就职于 Apple, Internet Archive, Flurry Live。任职苹果公司工程师期间负责 QuickTime Video 编解码研发工作,获得十项研发专利。

InfoQ:Slack 为什么会选用 WebRTC 技术?

Raj: WebRTC 的一个很大优势是它内置在当今的 Web 浏览器中。在 WebRTC 之上构建您的产品,意味着用户可以在 Web 浏览器中启动应用程序,无需安装任何插件或下载任何其他软件。

内置在 Web 浏览器中的 WebRTC 技术不仅可以提供一流的用户体验,同时也使得不同产品之间的协同变得轻而易举。例如,Slack 用户可以使用 Slack Calls 进行视频通话,也可以使用与 Slack 集成的任何一款第三方的视频会议应用程序。这些应用程序能够与 Slack 无缝地链接在一起。

使用 WebRTC 的另一个优点是,当由 Google 主导的 WebRTC 团队对产品进行改进时,基于 WebRTC 而构建的所有应用程序都可以快速获得相应的改进。例如,当 WebRTC 团队优化回声消除或带宽估计算法时,所有的 WebRTC 应用程序也都可以立即使用这些成果。

实时通信是由采集、编码、前后处理、解码、缓冲、渲染等多种技术组成的集合体,WebRTC 提供了前端实现和编解码,如果开发者要商用,还需要做不少的开发部署工作,来提供可用性。

InfoQ:我们在网上看到了一些评论,说 WebRTC 会占用非常高的 CPU 计算资源,这是怎么回事呢?

Raj: WebRTC 中最消耗计算资源的组件是视频编码器。在大多数平台上,视频编码和解码都是在软件中执行,而不是使用专用的硬件编解码器。好消息是,这种情况正在缓慢地改善。

WebRTC 允许使用 VP8、VP9 或 H.264 视频编解码器。H.264 编解码器的硬件支持适用于大多数的移动平台,现在我们开始看到 WebRTC 应用程序已经在 iOS 和 Android 上通过使用 H.264 来获得更好的性能。在桌面系统支持方面,WebRTC 的 H.264 硬件编码目前还不能像在移动系统上那样获得广泛的支持,还不能在浏览器中启用。

此外,WebRTC 在使用 H.264 时还不支持诸如 Simulcast 或 Scalable Video Coding 之类的技术。需要这些功能的应用程序主要使用 VP8 或 VP9 编解码器,这些编解码器还没有在大多数平台上获得硬件支持。对 WebRTC 编解码器的硬件支持将有助于减少我们今天看到的高 CPU 使用率问题,不过这些问题正在解决之中,预计还需要时间。

InfoQ:当您在 Slack 部署 WebRTC 时,遇到的最大的技术问题是什么?

Raj: Slack 可以为 Mac、Windows 和 Linux 桌面,以及 iOS 和 Android 设备提供客户端。我们面临的一个挑战是使所有客户的 WebRTC 库保持同步,并为每个客户端团队提供本地平台的高级 WebRTC API。

为了应对这些挑战,我们打造了一个构建系统,该系统可以让我们的 Android 团队通过 Java 界面,让我们的 iPhone 团队通过 Objective-C 界面,让我们的桌面团队通过 C ++ 界面,对 WebRTC 进行协同编译。该系统让我们的团队可以专注于建立强大的客户端,而不必担心 WebRTC 代码的接口问题。

InfoQ:关于如何使用 WebRTC,您可以向我们的读者提供一些建议吗?

Raj:通过 WebRTC,任何人都可以轻松地访问强大的应用程序。您只需少量的 Javascript 操作即可将视频会议添加到您的应用程序中,并且由于 WebRTC 可以在浏览器之间进行点对点的连接,因此您无需托管视频服务器就可以部署出应用程序。

WebRTC 仍然是一种新兴的技术,与之相关的质量演进还需要比较长时间,应用场景都有很大空间可以挖掘,所以对开发者来说,现在是构建自己的应用的很好时机!

2017-09-18 04:072845
用户头像

发布了 164 篇内容, 共 107.3 次阅读, 收获喜欢 392 次。

关注

评论

发布
暂无评论
发现更多内容

基于神经网络的大模型在自然语言处理中的应用前景展望

百度开发者中心

nlp 大模型 #人工智能

Java 实现 MySQL 数据锁定策略

秃头小帅oi

JavaScript中的异步处理方法,

互联网工科生

JavaScript 异步处理

如何使用1688店铺所有商品API接口

Noah

软件工程师必备的10个Git命令(先码住)

伤感汤姆布利柏

git GitHub

次世代建模纹理贴图怎么做?

3D建模设计

3D渲染 材质贴图 模型纹理

「智造」第10期:浅谈工业互联网加速企业服务化转型

用友BIP

智能制造

低代码开发可以解决哪些问题?

代码生成器研究

uniapp上架app store详细攻略

开源大模型驱动的编程能力测试

百度开发者中心

#人工智能 LLM

谷歌推广怎么做?

九凌网络

Footprint 的批量下载方案使交易回测更轻松

Footprint Analytics

区块链 回测

基于Java开发的支持全文检索,知识图谱,工作流审批的知识库管理系统

金陵老街

Vue 工作流 neo4j 知识图谱 spring-boot

香港VPS配置与应用:专家级建议与实践指南

一只扑棱蛾子

香港VPS

通过1688店铺所有商品API接口一键获取店铺所有商品信息

Noah

亚马逊云科技宣布推出Amazon Q重塑未来工作方式

财见

即时通讯技术文集(第25期):实时音视频基础入门 [共20篇]

JackJiang

网络编程 即时通讯 IM

亚马逊云科技联合Clarity AI共同推动大规模可持续性投资

财见

为什么说前端代码的复用率低?

代码生成器研究

3D场景建模工具

3D建模设计

在线工具 3D场景建模 数字孪生场景

生成式AI与预测式AI的主要区别与实际应用

高端章鱼哥

生成式AI 预测式AI

2023-11-29:用go语言,给你一个字符串 s ,请你去除字符串中重复的字母,使得每个字母只出现一次。 需保证 返回结果的字典序最小。 要求不能打乱其他字符的相对位置)。 输入:s = “cba

福大大架构师每日一题

福大大架构师每日一题

Mac强大的pd工具箱:Parallels Toolbox激活中文版

mac大玩家j

Mac软件 pd工具箱

线上教育服务的最佳方式为什么是小程序化?

Geek_2305a8

互联网计算机 IC 生态发展大揭秘,DFINITY 官方扶持计划全公开!

TinTinLand

#区块链# 编程教程 Dfinity

好用的建模仿真软件 Comsol Multiphysics激活中文

胖墩儿不胖y

Mac软件 仿真软件 仿真工具

LLM模型参数助力多模态大模型高效训练

百度开发者中心

大模型 #人工智能 LLM

3d模型的中心原点有偏移怎么办?

3D建模设计

3d建模 模型原点设置

NUKE 14 for mac(电影特效合成软件) v14.0v5中文激活版

mac

苹果mac Windows软件 NUKE 14 电影特效合成软件

创意性LED电子大屏幕推动LED显示屏行业融合

Dylan

功能 显示器 LED显示屏 全彩LED显示屏 led显示屏厂家

Slack是如何使用WebRTC的?_DevOps & 平台工程_徐川_InfoQ精选文章