2025上半年,最新 AI实践都在这!20+ 应用案例,任听一场议题就值回票价 了解详情
写点什么

无限想象,音视频技术实践与创新应用

  • 2019-10-29
  • 本文字数:1925 字

    阅读完需:约 6 分钟

无限想象,音视频技术实践与创新应用

10 月 17 日,ZEGO & InfoQ “一触即发· ZEGO 音视频技术交流夜”晚场活动在上海举办,现场,首先由即构科技联合创始人蒋宁波,进行了《音视频技术探索实践之路》的主题分享。随后在 Lean Coffee 环节,围绕音视频技术 6 个主题,六位技术专家与开发者们就音视频技术与应用进行了深度的探讨交流。


以下是音视频技术交流夜的主要内容回顾:

即构音视频技术探索与实践


在交流夜的主题分享环节,即构科技联合创始人蒋宁波,首先向我们展示了即构 18 年深厚的音视频技术积累:连接 5 亿+终端用户,服务覆盖全球超过 200 个国家和地区,每日通话时长 6 亿+分钟,兼容 8000+ 硬件机型,端到端 80ms 超低延时。在这些数字背后,是即构在技术和产品上不断的创新探索。

技术上:

2015 年,即构全球推出直播连麦技术,让低延迟连麦互动成为直播标配;


2017 年,全球推出 32 路视频通话技术,比苹果 Facetime 早一年;


2018 年,上线 WebRTC-Gateway 系统,打造全终端音视频云服务体系;


2019 年,上线全球服务拨测系统和全球多中心实时音视频调度系统;

产品上:

推出以互动视频、实时语音、语聊房为代表的 PaaS 产品,以 TalkLine 视频会议为主的 SaaS 产品,以及为金融、政企、军工等服务的私有化部署产品。产品广泛应用于秀场直播、社交、游戏、在线教育、在线医疗、智能硬件、金融等多个行业,为客户快速提供音视频通话能力。


即构在音视频领域的实践,绕不开完全自研的底层音视频引擎。基于自研技术,即构能快速响应客户多样化的需求,实现产品和技术的灵活拓展。


随着 5G 技术的发展,即构十分看好 5G 为音视频带来的超带宽、低延时应用。此前即构已经成立 5G 音视频实验室,研发并上线了 5G+4K 超高清直播应用功能,未来即构还将探索 5G+ 音视频的更多可能。

音视频技术赋能新世界

Lean Coffee 环节,来自不同企业的音视频开发者们齐聚一堂,围绕 WebRTC、高并发、QoE、编解码、音频 3A 处理、AI+4K 六个话题,共同探讨遇到的问题及解决思路。

WebRTC


WebRTC 作为目前流行的实时音视频开源技术,小组讨论的方向有三个:


第一,对 WebRTC 有兴趣,但是从未接触过的研发人员,要如何开始 WebRTC 技术的学习和应用?即构引擎组的技术专家向大家分享了 WebRTC 快速上手的心得;


第二,关于 WebRTC 前端兼容性问题,小组内就设备互通性、兼容性效果进行了探讨;


第三,关于 WebRTC 后端问题,由于 WebRTC 是通过 P2P 传输的,但在实际业务场景中,几乎没有直接通过 P2P 传输的,所以需要搭建一个网关,比如即构的 WebRTC-Gateway 系统。WebRTC 是开源技术,隐藏的“坑”众多。既有 WebRTC 本身的难点,比如 RTCP 协议、重传、带宽评估,也有像组网等后端普遍存在的问题,那么对于在 WebRTC 技术上没有太多经验的客户来说,与即构这种第三方技术商合作是避免踩坑最有效的方式。

高并发架构


高并发小组讨论的内容集中在回源和调度上,即构后台组技术专家简单分享了即构在这方面的技术实践:


回源,即服务器到服务器之间的数据传输。即构会根据链路、节点质量等去选择最优的线路,为用户提供流畅低延时的实时流媒体的传输;


调度方面,即构自研的全球智能调度系统,与基于 DNS 解析的调度相比有较大优势:我们能够根据用户的地理位置及归属的不同运营商,选择不同的设备,并且在容灾上做了很多工作,比如给客户端返回多个 IDC 节点,尽可能保障用户服务的可用性。在高并发方面,我们可以支持大量用户同时推拉流,并且支持大房间场景,提供稳定流畅的实时音视频服务。

QoE


在 QoE (用户质量体验)方面,来自即构的解决方案架构师做了简短的分享。在实际业务场景中经常出现的一个场景是:开发小伙伴经常听到运营人员说“用户反馈卡了”,但是,没有相关的指标或者数据提供,开发人员也束手无策。


基于此,小组成员感兴趣的是,即构有着 5 亿+的庞大用户群体,是如何依靠后台的全球多中心实时调度系统,保障用户的真实体验?


首先,即构今年上线了全球拨测系统,会对可能有故障的线路进行预警和规避;其次,根据每日大量的线上用户实时数据,即构的调度系统能实时查看哪些地区哪些用户访问哪些运营商,甚至哪些边缘节点的 IP 到哪些中间节点 IP,传输效果是最好的,然后其实时推拉流,根据实时配置文件下发的 IP 进行;第三,即构开放全面的线上数据分析诊断,让用户能快速定位“哪里卡,为什么卡,用户哪些动作导致卡”。


此外,现场还有关于 AI 与音视频行业的结合、4K 超高清技术带来的极致视听体验、复杂网络对音频的冲击等话题的分享,各种碰撞在开发者中间产生。



在音视频交流夜上,我们看到了为满足多场景应用,即构进行的多项技术创新,通过与现场众多从业者的互动交流,我们能看到音视频技术应用的多种可能性,一个通过实时音视频连接的世界即将到来,让我们一起期待!


2019-10-29 10:592626

评论

发布
暂无评论
发现更多内容

华为云软件开发生产线(CodeArts)9月新功能特性

YG科技

度小满,让“推理大模型”走向金融核心业务

脑极体

AI

HarmonyOS 5.0应用开发——全屏模态框

高心星

HarmonyOS arkui 鸿蒙5.0 HarmonyOS NEXT

HarmonyOS 5.0应用开发——下拉刷新和上拉加载更多组件

高心星

鸿蒙 HarmonyOS 鸿蒙5.0 HarmonyOS NEXT

比较API架构样式:SOAP与REST与GraphQL与RPC

幂简集成

API graphql soap

HarmonyOS 5.0应用开发——半模态框展示

高心星

鸿蒙 HarmonyOS 鸿蒙5.0 HarmonyOS NEXT

HarmonyOS 5.0应用开发——@BuildParam自定义插槽

高心星

鸿蒙 HarmonyOS 鸿蒙5.0 HarmonyOS NEXT

天润融通突破AI客服局限,三大关键提升文本机器人问答效果

天润融通

天润融通创新方案,3分钟掌握引入一线经验至知识库

天润融通

HarmonyOS 5.0应用开发——@build构建函数的使用

高心星

HarmonyOS 鸿蒙 Ability arkui 鸿蒙5.0

HarmonyOS 5.0应用开发——响应式布局之媒体查询

高心星

鸿蒙 arkui 鸿蒙5.0 HarmonyOS NEXT

HarmonyOS 5.0应用开发——菜单的显示

高心星

鸿蒙 HarmonyOS 鸿蒙5.0 HarmonyOS NEXT

07.适配器模式设计思想

杨充

中间件全球数据实时同步利器,华为云EventGrid 事件流重磅发布

YG科技

阿里巴巴1688商品API:深度解析商品分类与筛选条件

代码忍者

API 接口 pinduoduo API

HarmonyOS 5.0应用开发——LazyForEach数据懒加载

高心星

HarmonyOS arkui 鸿蒙5.0 HarmonyOS NEXT

HarmonyOS 5.0应用开发——瀑布流WaterFlow

高心星

鸿蒙 HarmonyOS 鸿蒙5.0 HarmonyOS NEXT

HarmonyOS 5.0应用开发——抽屉布局SideBarContainer

高心星

鸿蒙 HarmonyOS 鸿蒙5.0 HarmonyOS NEXT

为革命保护“视”力 - 注意力插件开发

小学后生

开源 工具 插件 谷歌插件

无限想象,音视频技术实践与创新应用_AI&大模型_即构_InfoQ精选文章