NVIDIA 初创加速计划,免费加速您的创业启动 了解详情
写点什么

无限想象,音视频技术实践与创新应用

  • 2019-10-29
  • 本文字数:1925 字

    阅读完需:约 6 分钟

无限想象,音视频技术实践与创新应用

10 月 17 日,ZEGO & InfoQ “一触即发· ZEGO 音视频技术交流夜”晚场活动在上海举办,现场,首先由即构科技联合创始人蒋宁波,进行了《音视频技术探索实践之路》的主题分享。随后在 Lean Coffee 环节,围绕音视频技术 6 个主题,六位技术专家与开发者们就音视频技术与应用进行了深度的探讨交流。


以下是音视频技术交流夜的主要内容回顾:

即构音视频技术探索与实践


在交流夜的主题分享环节,即构科技联合创始人蒋宁波,首先向我们展示了即构 18 年深厚的音视频技术积累:连接 5 亿+终端用户,服务覆盖全球超过 200 个国家和地区,每日通话时长 6 亿+分钟,兼容 8000+ 硬件机型,端到端 80ms 超低延时。在这些数字背后,是即构在技术和产品上不断的创新探索。

技术上:

2015 年,即构全球推出直播连麦技术,让低延迟连麦互动成为直播标配;


2017 年,全球推出 32 路视频通话技术,比苹果 Facetime 早一年;


2018 年,上线 WebRTC-Gateway 系统,打造全终端音视频云服务体系;


2019 年,上线全球服务拨测系统和全球多中心实时音视频调度系统;

产品上:

推出以互动视频、实时语音、语聊房为代表的 PaaS 产品,以 TalkLine 视频会议为主的 SaaS 产品,以及为金融、政企、军工等服务的私有化部署产品。产品广泛应用于秀场直播、社交、游戏、在线教育、在线医疗、智能硬件、金融等多个行业,为客户快速提供音视频通话能力。


即构在音视频领域的实践,绕不开完全自研的底层音视频引擎。基于自研技术,即构能快速响应客户多样化的需求,实现产品和技术的灵活拓展。


随着 5G 技术的发展,即构十分看好 5G 为音视频带来的超带宽、低延时应用。此前即构已经成立 5G 音视频实验室,研发并上线了 5G+4K 超高清直播应用功能,未来即构还将探索 5G+ 音视频的更多可能。

音视频技术赋能新世界

Lean Coffee 环节,来自不同企业的音视频开发者们齐聚一堂,围绕 WebRTC、高并发、QoE、编解码、音频 3A 处理、AI+4K 六个话题,共同探讨遇到的问题及解决思路。

WebRTC


WebRTC 作为目前流行的实时音视频开源技术,小组讨论的方向有三个:


第一,对 WebRTC 有兴趣,但是从未接触过的研发人员,要如何开始 WebRTC 技术的学习和应用?即构引擎组的技术专家向大家分享了 WebRTC 快速上手的心得;


第二,关于 WebRTC 前端兼容性问题,小组内就设备互通性、兼容性效果进行了探讨;


第三,关于 WebRTC 后端问题,由于 WebRTC 是通过 P2P 传输的,但在实际业务场景中,几乎没有直接通过 P2P 传输的,所以需要搭建一个网关,比如即构的 WebRTC-Gateway 系统。WebRTC 是开源技术,隐藏的“坑”众多。既有 WebRTC 本身的难点,比如 RTCP 协议、重传、带宽评估,也有像组网等后端普遍存在的问题,那么对于在 WebRTC 技术上没有太多经验的客户来说,与即构这种第三方技术商合作是避免踩坑最有效的方式。

高并发架构


高并发小组讨论的内容集中在回源和调度上,即构后台组技术专家简单分享了即构在这方面的技术实践:


回源,即服务器到服务器之间的数据传输。即构会根据链路、节点质量等去选择最优的线路,为用户提供流畅低延时的实时流媒体的传输;


调度方面,即构自研的全球智能调度系统,与基于 DNS 解析的调度相比有较大优势:我们能够根据用户的地理位置及归属的不同运营商,选择不同的设备,并且在容灾上做了很多工作,比如给客户端返回多个 IDC 节点,尽可能保障用户服务的可用性。在高并发方面,我们可以支持大量用户同时推拉流,并且支持大房间场景,提供稳定流畅的实时音视频服务。

QoE


在 QoE (用户质量体验)方面,来自即构的解决方案架构师做了简短的分享。在实际业务场景中经常出现的一个场景是:开发小伙伴经常听到运营人员说“用户反馈卡了”,但是,没有相关的指标或者数据提供,开发人员也束手无策。


基于此,小组成员感兴趣的是,即构有着 5 亿+的庞大用户群体,是如何依靠后台的全球多中心实时调度系统,保障用户的真实体验?


首先,即构今年上线了全球拨测系统,会对可能有故障的线路进行预警和规避;其次,根据每日大量的线上用户实时数据,即构的调度系统能实时查看哪些地区哪些用户访问哪些运营商,甚至哪些边缘节点的 IP 到哪些中间节点 IP,传输效果是最好的,然后其实时推拉流,根据实时配置文件下发的 IP 进行;第三,即构开放全面的线上数据分析诊断,让用户能快速定位“哪里卡,为什么卡,用户哪些动作导致卡”。


此外,现场还有关于 AI 与音视频行业的结合、4K 超高清技术带来的极致视听体验、复杂网络对音频的冲击等话题的分享,各种碰撞在开发者中间产生。



在音视频交流夜上,我们看到了为满足多场景应用,即构进行的多项技术创新,通过与现场众多从业者的互动交流,我们能看到音视频技术应用的多种可能性,一个通过实时音视频连接的世界即将到来,让我们一起期待!


公众号推荐:

跳进 AI 的奇妙世界,一起探索未来工作的新风貌!想要深入了解 AI 如何成为产业创新的新引擎?好奇哪些城市正成为 AI 人才的新磁场?《中国生成式 AI 开发者洞察 2024》由 InfoQ 研究中心精心打造,为你深度解锁生成式 AI 领域的最新开发者动态。无论你是资深研发者,还是对生成式 AI 充满好奇的新手,这份报告都是你不可错过的知识宝典。欢迎大家扫码关注「AI前线」公众号,回复「开发者洞察」领取。

2019-10-29 10:591916

评论

发布
暂无评论
发现更多内容

这一年我们上线的运维自动化系统

37丫37

DevOps 运维 自动化 工具 开发.

新书上线 | 《使用 NGINX 部署和保护 Kubernetes Ingress Controller》中文版

NGINX开源社区

nginx Kubernetes API NGINX Ingress Controller NGINX Service Mesh

实力认可!TDengine 在“2023 年度金猿季”两大榜单中脱颖而出

TDengine

tdengine 时序数据库

指标平台详解(下):第三代指标平台实现了哪些突破?

Aloudata

BI ETL 指标中台; 指标中台

全面升级!Apache HugeGraph 1.2.0版本发布

百度安全

技术解读 | KunDB助力头部金融机构关键系统的Oracle国产替代

星环科技

oracle 大数据 科技 大模型

万字图解 | 深入揭秘HTTP工作原理

云舒编程

多路复用 HTTP web socket QUIC 图解网络

有了这张微积分知识地图,你可能会爱上高数!

博文视点Broadview

聚道云软件连接器1月新增应用/产品更新合集

聚道云软件连接器

功能更新

产品解读 | 新一代湖仓集存储,多模型统一架构,高效挖掘数据价值

星环科技

大数据 信创 科技 大模型

Python 变量?对象?引用?赋值?一个例子解释清楚

EquatorCoco

Python 前端 变量 对象 开发语言

一分钟了解Wireshark的数据包

小齐写代码

探索技术的无限可能-云原生计算2023年度奖项

字节跳动云原生计算

大数据 云原生

软件测试学习笔记丨JMeter使用代理录制脚本

测试人

软件测试

Footprint 的卓越资金流数据揭示加密货币的神秘叙事

Footprint Analytics

区块链 数据分析 加密货币

大数据处理流程包括哪些环节

悦数图数据库

大数据处理流程

程序员手把手教你参与开源!拿捏!

快乐非自愿限量之名

开源 程序员 面试

(保姆级)服务器-Zabbix6.0使用Python脚本实现带图片的邮箱的报警

不在线第一只蜗牛

Python 运维 服务器

第三届“新科技 星力量” 科技实践案例评选【获奖名单】揭晓

星环科技

大数据 科技 大模型 获奖

星环科技基于第五代英特尔®至强®可扩展处理器的分布式向量数据库解决方案重磅发布

星环科技

大数据 信创 科技 大模型

近6成金融机构的选择!华为云GaussDB加快金融核心系统转型

华为云开发者联盟

数据库 后端 华为云 华为云GaussDB 华为云开发者联盟

软件测试学习笔记丨Grafana安装

测试人

软件测试

AppLink让你的电商运营财务管理自动化

RestCloud

零代码 APPlink 自动化集成

“研学测”好帮手,三步带你安装体验TDH社区开发版

星环科技

大数据 信创 科技 大模型

实现钉钉与宁波银行对接,助力企业实现财务智能化

聚道云软件连接器

案例分享

万字图解 | 深入揭秘TCP工作原理

云舒编程

三次握手 TCP协议 TCP四次挥手 MSL 滑动窗口

图像处理-Java-指定大小压缩

alexgaoyh

Java 图像处理 图像压缩 压缩算法 指定大小

亚马逊云科技在中国推出数字孪生服务Amazon IoT TwinMaker

财见

【第七在线】数字化转型:智能商品计划管理的核心要素

第七在线

英特尔实现3D先进封装技术的大规模量产

E科讯

软件测试学习笔记丨性能测试体系

测试人

软件测试

无限想象,音视频技术实践与创新应用_AI&大模型_即构_InfoQ精选文章