WebAssembly 在音视频领域的应用

阅读数:77 2019 年 9 月 21 日 14:56

WebAssembly在音视频领域的应用

GMTC 北京 2018 大会上,和君讲师做了《WebAssembly 在音视频领域的应用》主题演讲,主要内容如下。

演讲简介

WebAssembly 技术历经 3 年的发展已经日臻成熟,主流浏览器厂商都已提供了对 Webassemly 的支持。WebAssembly 技术的引入大幅提升了浏览器端一些计算密集型的场景(如:音视频领域,3D 游戏)的性能,利用 WebAssembly 技术的特性在浏览器端与 WebRTC 相结合实现更加丰富的音视频呈现效果,分享内容包含基于 WebAssembly 的实现视频 Filter ,面部检测与关键点识别,并结合在线教育 K12 教学场景提升音视频互动性。可以预见 WebAssembly 能让音视频技术和 Web 前端开发更完美的结合在一起。

演讲提纲:

  1. WebAssembly 技术介绍

(1) WebAssembly 诞生的背景

(2) WebAssembly 的原理、运行机制及适用场景

(3) WebAssembly 当前发展的现状

  1. WebAssembly 开发及应用

(1)WebAssembly 相关工具链的介绍

(2)WebAssembly 的开发、调试、调优

(3)和传统 JS 的性能对比

  1. 结合 WebAssembly 提升在线课堂音视频的互动性

(1) 实现基于 facial detection,facial alignment 的教学体验的提升

(2) 在浏览器端实现基于面部跟踪的虚拟面具

(3) WebAssembly 如何与既有的前端工程结合

(4) 开发时的一些技巧和最佳实践

  1. WebAssembly 的展望及预期

(1) 开发 WebAssembly 可能遇到的坑

(2) WebAssembly 未来发展 Roadmap

听众收益:

  1. 了解 WebAssmebly 的原理、应用及发展趋势
  2. 帮助听众了解当前浏览器已具备媲美 Client 端及移动端 Native App 的能力
  3. 借助 WebAssembly,提升音视频在终端的表现能力

讲师介绍

和君

TutorABC 大前端部门负责人

10 余年前后端研发及管理经验,曾就职于沪江网、途牛网等互联网公司。擅长大型前端项目架构,前端工程化,前端及 Node.js 服务端性能优化等。现负责 TutorABC 大前端部门,以及音视频教学平台 “Tutormeet+” 的浏览器端和客户端相关工作,致力于打造在线教育领域的 WebRTC 高性能富交互前端解决方案。

WebAssembly在音视频领域的应用

WebAssembly在音视频领域的应用

WebAssembly在音视频领域的应用

WebAssembly在音视频领域的应用

WebAssembly在音视频领域的应用

WebAssembly在音视频领域的应用

WebAssembly在音视频领域的应用

WebAssembly在音视频领域的应用

WebAssembly在音视频领域的应用

WebAssembly在音视频领域的应用

完整演讲 PPT 下载链接

https://gmtc.infoq.cn/2018/beijing/schedule

评论

发布