【QCon】精华内容上线85%,全面覆盖“人工智能+”的典型案例!>>> 了解详情
写点什么

无限想象,音视频技术实践与创新应用

  • 2019-10-29
  • 本文字数:1925 字

    阅读完需:约 6 分钟

无限想象,音视频技术实践与创新应用

10 月 17 日,ZEGO & InfoQ “一触即发· ZEGO 音视频技术交流夜”晚场活动在上海举办,现场,首先由即构科技联合创始人蒋宁波,进行了《音视频技术探索实践之路》的主题分享。随后在 Lean Coffee 环节,围绕音视频技术 6 个主题,六位技术专家与开发者们就音视频技术与应用进行了深度的探讨交流。


以下是音视频技术交流夜的主要内容回顾:

即构音视频技术探索与实践


在交流夜的主题分享环节,即构科技联合创始人蒋宁波,首先向我们展示了即构 18 年深厚的音视频技术积累:连接 5 亿+终端用户,服务覆盖全球超过 200 个国家和地区,每日通话时长 6 亿+分钟,兼容 8000+ 硬件机型,端到端 80ms 超低延时。在这些数字背后,是即构在技术和产品上不断的创新探索。

技术上:

2015 年,即构全球推出直播连麦技术,让低延迟连麦互动成为直播标配;


2017 年,全球推出 32 路视频通话技术,比苹果 Facetime 早一年;


2018 年,上线 WebRTC-Gateway 系统,打造全终端音视频云服务体系;


2019 年,上线全球服务拨测系统和全球多中心实时音视频调度系统;

产品上:

推出以互动视频、实时语音、语聊房为代表的 PaaS 产品,以 TalkLine 视频会议为主的 SaaS 产品,以及为金融、政企、军工等服务的私有化部署产品。产品广泛应用于秀场直播、社交、游戏、在线教育、在线医疗、智能硬件、金融等多个行业,为客户快速提供音视频通话能力。


即构在音视频领域的实践,绕不开完全自研的底层音视频引擎。基于自研技术,即构能快速响应客户多样化的需求,实现产品和技术的灵活拓展。


随着 5G 技术的发展,即构十分看好 5G 为音视频带来的超带宽、低延时应用。此前即构已经成立 5G 音视频实验室,研发并上线了 5G+4K 超高清直播应用功能,未来即构还将探索 5G+ 音视频的更多可能。

音视频技术赋能新世界

Lean Coffee 环节,来自不同企业的音视频开发者们齐聚一堂,围绕 WebRTC、高并发、QoE、编解码、音频 3A 处理、AI+4K 六个话题,共同探讨遇到的问题及解决思路。

WebRTC


WebRTC 作为目前流行的实时音视频开源技术,小组讨论的方向有三个:


第一,对 WebRTC 有兴趣,但是从未接触过的研发人员,要如何开始 WebRTC 技术的学习和应用?即构引擎组的技术专家向大家分享了 WebRTC 快速上手的心得;


第二,关于 WebRTC 前端兼容性问题,小组内就设备互通性、兼容性效果进行了探讨;


第三,关于 WebRTC 后端问题,由于 WebRTC 是通过 P2P 传输的,但在实际业务场景中,几乎没有直接通过 P2P 传输的,所以需要搭建一个网关,比如即构的 WebRTC-Gateway 系统。WebRTC 是开源技术,隐藏的“坑”众多。既有 WebRTC 本身的难点,比如 RTCP 协议、重传、带宽评估,也有像组网等后端普遍存在的问题,那么对于在 WebRTC 技术上没有太多经验的客户来说,与即构这种第三方技术商合作是避免踩坑最有效的方式。

高并发架构


高并发小组讨论的内容集中在回源和调度上,即构后台组技术专家简单分享了即构在这方面的技术实践:


回源,即服务器到服务器之间的数据传输。即构会根据链路、节点质量等去选择最优的线路,为用户提供流畅低延时的实时流媒体的传输;


调度方面,即构自研的全球智能调度系统,与基于 DNS 解析的调度相比有较大优势:我们能够根据用户的地理位置及归属的不同运营商,选择不同的设备,并且在容灾上做了很多工作,比如给客户端返回多个 IDC 节点,尽可能保障用户服务的可用性。在高并发方面,我们可以支持大量用户同时推拉流,并且支持大房间场景,提供稳定流畅的实时音视频服务。

QoE


在 QoE (用户质量体验)方面,来自即构的解决方案架构师做了简短的分享。在实际业务场景中经常出现的一个场景是:开发小伙伴经常听到运营人员说“用户反馈卡了”,但是,没有相关的指标或者数据提供,开发人员也束手无策。


基于此,小组成员感兴趣的是,即构有着 5 亿+的庞大用户群体,是如何依靠后台的全球多中心实时调度系统,保障用户的真实体验?


首先,即构今年上线了全球拨测系统,会对可能有故障的线路进行预警和规避;其次,根据每日大量的线上用户实时数据,即构的调度系统能实时查看哪些地区哪些用户访问哪些运营商,甚至哪些边缘节点的 IP 到哪些中间节点 IP,传输效果是最好的,然后其实时推拉流,根据实时配置文件下发的 IP 进行;第三,即构开放全面的线上数据分析诊断,让用户能快速定位“哪里卡,为什么卡,用户哪些动作导致卡”。


此外,现场还有关于 AI 与音视频行业的结合、4K 超高清技术带来的极致视听体验、复杂网络对音频的冲击等话题的分享,各种碰撞在开发者中间产生。



在音视频交流夜上,我们看到了为满足多场景应用,即构进行的多项技术创新,通过与现场众多从业者的互动交流,我们能看到音视频技术应用的多种可能性,一个通过实时音视频连接的世界即将到来,让我们一起期待!


公众号推荐:

2024 年 1 月,InfoQ 研究中心重磅发布《大语言模型综合能力测评报告 2024》,揭示了 10 个大模型在语义理解、文学创作、知识问答等领域的卓越表现。ChatGPT-4、文心一言等领先模型在编程、逻辑推理等方面展现出惊人的进步,预示着大模型将在 2024 年迎来更广泛的应用和创新。关注公众号「AI 前线」,回复「大模型报告」免费获取电子版研究报告。

AI 前线公众号
2019-10-29 10:591878

评论

发布
暂无评论
发现更多内容

吕氏餐饮:用宜搭智能考核绩效,人事管理更高效

一只大光圈

低代码 数字化 钉钉宜搭

测性能,拿周边|OceanBase 3.1.2 版邀你来玩

OceanBase 数据库

设计微博系统中”微博评论“的高性能高可用计算架构

IT屠狗辈

架构实战营 微博评论架构实战

discuz防止恶意注册!

喀拉峻

网络安全

海量非结构化数据副本难保护,焱融科技携手英方推出联合解决方案

焱融科技

云计算 分布式 云原生 高性能 文件存储

微博“发评论”高性能高可用计算架构

Fingal

#架构实战营

在线JSON转HTML工具

入门小站

工具

“易+”开源 | 网易会议开源之移动端篇

网易云信

开发

架构训练营 模块五

Geek_16d2b8

架构训练营5期

在线JSON转CSV格式文件工具

入门小站

工具

模块五作业

blazar

「架构实战营」

cdr2022新版本序列号功能详解

茶色酒

cdr2022

微博评论高性能计算架构设计

炎彬

「架构实战营」

2月券商App行情刷新及交易体验报告,东方与安信升至领导者象限

博睿数据

如何设计信息安全领域的实时安全基线引擎

Apache Flink

大数据 flink 开源 编程 实时计算

微博评论的高性能高可用计算架构设计

五月雨

架构实战营 「架构实战营」

微博评论高性能高可用计算架构

石小天

「架构实战营」

SpringCloud-Feign

昊运

SpringCloud

【英雄大会】之谁说站在光里的才算英雄(上篇)

Anna

经历分享 作者 简介

基于爬虫的测试自动化经验分享

FunTester

爬虫 性能测试 办公自动化 FunTester 测试自动化

Flutter仿微信价值几个亿的页面

岛上码农

flutter ios开发 Android开发 移动端开发 3月月更

深度强化学习的“丛林”大冒险

脑极体

Linux之ack命令

入门小站

Linux

“微博评论”的高性能、高可用架构设计

凌波微步

「架构实战营」

微博评论-高性能高可用计算架构

邹玉麒

「架构实战营」

一文读懂可观测性与Opentelemetry

博睿数据

架构实战营:模块五作业

刘璐

“微博评论”的高性能高可用计算架构

张逃逃

透过荣耀耳机的三重“炼金术”,重识TWS行业

脑极体

【图解数据结构】树和二叉树全面总结

知心宝贝

二叉树 数据结构与算法 二叉树遍历 3月月更 树和二叉树

模块五 评论计算架构

Geek_28cf33

无限想象,音视频技术实践与创新应用_AI&大模型_即构_InfoQ精选文章