发布在即!企业 AIGC 应用程度测评,3 步定制专属评估报告。抢首批测评权益>>> 了解详情
写点什么

无限想象,音视频技术实践与创新应用

  • 2019-10-29
  • 本文字数:1925 字

    阅读完需:约 6 分钟

无限想象,音视频技术实践与创新应用

10 月 17 日,ZEGO & InfoQ “一触即发· ZEGO 音视频技术交流夜”晚场活动在上海举办,现场,首先由即构科技联合创始人蒋宁波,进行了《音视频技术探索实践之路》的主题分享。随后在 Lean Coffee 环节,围绕音视频技术 6 个主题,六位技术专家与开发者们就音视频技术与应用进行了深度的探讨交流。


以下是音视频技术交流夜的主要内容回顾:

即构音视频技术探索与实践


在交流夜的主题分享环节,即构科技联合创始人蒋宁波,首先向我们展示了即构 18 年深厚的音视频技术积累:连接 5 亿+终端用户,服务覆盖全球超过 200 个国家和地区,每日通话时长 6 亿+分钟,兼容 8000+ 硬件机型,端到端 80ms 超低延时。在这些数字背后,是即构在技术和产品上不断的创新探索。

技术上:

2015 年,即构全球推出直播连麦技术,让低延迟连麦互动成为直播标配;


2017 年,全球推出 32 路视频通话技术,比苹果 Facetime 早一年;


2018 年,上线 WebRTC-Gateway 系统,打造全终端音视频云服务体系;


2019 年,上线全球服务拨测系统和全球多中心实时音视频调度系统;

产品上:

推出以互动视频、实时语音、语聊房为代表的 PaaS 产品,以 TalkLine 视频会议为主的 SaaS 产品,以及为金融、政企、军工等服务的私有化部署产品。产品广泛应用于秀场直播、社交、游戏、在线教育、在线医疗、智能硬件、金融等多个行业,为客户快速提供音视频通话能力。


即构在音视频领域的实践,绕不开完全自研的底层音视频引擎。基于自研技术,即构能快速响应客户多样化的需求,实现产品和技术的灵活拓展。


随着 5G 技术的发展,即构十分看好 5G 为音视频带来的超带宽、低延时应用。此前即构已经成立 5G 音视频实验室,研发并上线了 5G+4K 超高清直播应用功能,未来即构还将探索 5G+ 音视频的更多可能。

音视频技术赋能新世界

Lean Coffee 环节,来自不同企业的音视频开发者们齐聚一堂,围绕 WebRTC、高并发、QoE、编解码、音频 3A 处理、AI+4K 六个话题,共同探讨遇到的问题及解决思路。

WebRTC


WebRTC 作为目前流行的实时音视频开源技术,小组讨论的方向有三个:


第一,对 WebRTC 有兴趣,但是从未接触过的研发人员,要如何开始 WebRTC 技术的学习和应用?即构引擎组的技术专家向大家分享了 WebRTC 快速上手的心得;


第二,关于 WebRTC 前端兼容性问题,小组内就设备互通性、兼容性效果进行了探讨;


第三,关于 WebRTC 后端问题,由于 WebRTC 是通过 P2P 传输的,但在实际业务场景中,几乎没有直接通过 P2P 传输的,所以需要搭建一个网关,比如即构的 WebRTC-Gateway 系统。WebRTC 是开源技术,隐藏的“坑”众多。既有 WebRTC 本身的难点,比如 RTCP 协议、重传、带宽评估,也有像组网等后端普遍存在的问题,那么对于在 WebRTC 技术上没有太多经验的客户来说,与即构这种第三方技术商合作是避免踩坑最有效的方式。

高并发架构


高并发小组讨论的内容集中在回源和调度上,即构后台组技术专家简单分享了即构在这方面的技术实践:


回源,即服务器到服务器之间的数据传输。即构会根据链路、节点质量等去选择最优的线路,为用户提供流畅低延时的实时流媒体的传输;


调度方面,即构自研的全球智能调度系统,与基于 DNS 解析的调度相比有较大优势:我们能够根据用户的地理位置及归属的不同运营商,选择不同的设备,并且在容灾上做了很多工作,比如给客户端返回多个 IDC 节点,尽可能保障用户服务的可用性。在高并发方面,我们可以支持大量用户同时推拉流,并且支持大房间场景,提供稳定流畅的实时音视频服务。

QoE


在 QoE (用户质量体验)方面,来自即构的解决方案架构师做了简短的分享。在实际业务场景中经常出现的一个场景是:开发小伙伴经常听到运营人员说“用户反馈卡了”,但是,没有相关的指标或者数据提供,开发人员也束手无策。


基于此,小组成员感兴趣的是,即构有着 5 亿+的庞大用户群体,是如何依靠后台的全球多中心实时调度系统,保障用户的真实体验?


首先,即构今年上线了全球拨测系统,会对可能有故障的线路进行预警和规避;其次,根据每日大量的线上用户实时数据,即构的调度系统能实时查看哪些地区哪些用户访问哪些运营商,甚至哪些边缘节点的 IP 到哪些中间节点 IP,传输效果是最好的,然后其实时推拉流,根据实时配置文件下发的 IP 进行;第三,即构开放全面的线上数据分析诊断,让用户能快速定位“哪里卡,为什么卡,用户哪些动作导致卡”。


此外,现场还有关于 AI 与音视频行业的结合、4K 超高清技术带来的极致视听体验、复杂网络对音频的冲击等话题的分享,各种碰撞在开发者中间产生。



在音视频交流夜上,我们看到了为满足多场景应用,即构进行的多项技术创新,通过与现场众多从业者的互动交流,我们能看到音视频技术应用的多种可能性,一个通过实时音视频连接的世界即将到来,让我们一起期待!


公众号推荐:

2024 年 1 月,InfoQ 研究中心重磅发布《大语言模型综合能力测评报告 2024》,揭示了 10 个大模型在语义理解、文学创作、知识问答等领域的卓越表现。ChatGPT-4、文心一言等领先模型在编程、逻辑推理等方面展现出惊人的进步,预示着大模型将在 2024 年迎来更广泛的应用和创新。关注公众号「AI 前线」,回复「大模型报告」免费获取电子版研究报告。

AI 前线公众号
2019-10-29 10:591894

评论

发布
暂无评论
发现更多内容

EMQ畅谈IoT数据基础软件开源版图,引领本土开源走向全球

EMQ映云科技

开源 物联网 IoT emq 8月月更

基于ECS实现一分钟自动化部署【华为云至简致远】

科技云未来

自动化部署

急了,Mysql索引中最不容易记的三个知识点通透了

知识浅谈

8月月更

带你玩转“超大杯”ECS特性及实验踩坑【华为云至简致远】

科技怪咖

国产数据库的红利还能“吃”多久?

墨天轮

数据库 国产数据库

*打卡—>什么是云数据库&&沙箱实验如何用python和数据库来爬虫?【华为云至简致远】

科技云未来

云数据库

2022年中国全民健身发展白皮书

易观分析

行业分析 健身

一起来学华为云数据库,RDS实践【华为云至简致远】

科技云未来

云数据库

它们不一样!透析【观察者模式】和【发布订阅模式】

掘金安东尼

前端 设计模式 8月月更

QCon 回顾 | Data Fabric:逻辑统一、物理分散

网易数帆

大数据 数据湖 降本增效 Data Fabric

mysql进阶(二十九)常用函数汇总

No Silver Bullet

MySQL mysql常用函数 8月月更

2022纯手工打造1700道Java高级工程师面试宝典(含面试题解析)

Java工程师

Java 面试 八股文

阿里巴巴最新分享Spring Cloud核心笔记,全程实例讲解,通俗易懂

Java工程师

Java spring spring-cloud

有了这个开源工具后,我五点就下班了!

IT学习日记

EasyExcel 签约计划第三季 seaweedfs文件系统 java excel导出导入 java csv导出导入

10分钟快速入门RDS【华为云至简致远】

科技云未来

RDS

科创人·优锘科技COO孙岗:错误问题找不到正确答案,求索万物可视的大美未来

科创人

华为云服务之弹性云服务器ECS的深度使用和云端实践【华为云至简致远】

科技云未来

弹性云服务器ECS

华为云分布式缓存服务Redis开通及使用规划教程【华为云至简致远】

科技云未来

redis'

写给 Java 程序员的前端 Promise 教程

CRMEB

Grid 布局介绍

CRMEB

腾讯云产品可观测最佳实践 (Function)

观测云

Java泛型的继承场景

Geek_163f36

基于华为云弹性云服务器ECS(搭载openEuler的鲲鹏通用计算增强型)完成鲲鹏代码迁移工具实践【华为云至简致远】

科技云未来

鲲鹏服务器 弹性云服务器ESC

基于华为云ModelArts的水表读数识别开发实践【华为云至简致远】

科技云未来

水表读数识别项目

Beetl使用记录

Geek_163f36

Qt下异步使用C++调用Python文件

Geek_163f36

用完华为云会议解决方案,我直接卸载了之前的会议软件【华为云至简致远】

科技云未来

云会议产品

调研阶段复盘

Geek_XOXO

复盘

Taro小程序跨端开发入门实战

京东科技开发者

小程序 taro 开发 移动端

国内部分手机游戏开始显示用户IP属地

郑州埃文科技

游戏 手游 IP归属地

APICloud AVM 封装日期和时间选择组件

YonBuilder低代码开发平台

安卓 低代码开发 多端开发

无限想象,音视频技术实践与创新应用_AI&大模型_即构_InfoQ精选文章