写点什么

声网 Agora SDK 支持 50ms 超低延时耳返 适配主流手机机型

  • 2020-05-06
  • 本文字数:1552 字

    阅读完需:约 5 分钟

声网Agora SDK支持50ms超低延时耳返 适配主流手机机型

近年来,随着网络直播的火爆,直播唱歌成为了很多主播在直播间的必备技巧,同时全民 K 歌、唱吧等在线 K 歌软件的兴起,也让很多人足不出户也能享受 K 歌的乐趣,并成为越来越多人偏爱的在线娱乐方式。而不管是直播唱歌还是在线 K 歌,低延时的耳返功能对于唱歌体验都有着很关键的作用,可帮助用户通过耳机实时听到麦克风采集到的声音。


尤其对主播而言,在唱歌时需要通过耳返来监听自己的声音和伴奏,来判断自己的声音是不是走音,并根据自己听到的声音,来调节音色和情感,因此对耳返的延迟要求较高。而国内的手机厂商虽然自带 Android 系统的耳返功能,但由于普通耳返的功能单一,且 Android 机型众多,系统版本不一,自带的耳返功能并不能满足所有机型,导致了一些手机的耳返出现了 200ms-300ms 的高延迟。


针对这样的痛点,全球领先的音视频云 PaaS 服务商声网 Agora 面向手机厂商推出了超低延时耳返解决方案,通过声网 Agora 的音视频 SDK 提供统一接口的超低延时 K 歌耳返功能,并与主流手机厂商深度技术合作,可为 K 歌、直播类 app 提供适配不同手机品牌、手机机型的耳返应用,实现超低延时、超低噪声、极致音效的耳返体验。


统一适配机型 低于 50ms 超低延时耳返


针对一些手机机型会出现高延迟耳返问题,很多手机厂商也做了努力,针对耳返功能从系统底层做了特殊的优化,通过底层芯片级优化,提供低延时音频数据通路和混音耳返的音效。但在软件场景层面,K 歌、直播类 app 想要获得理想的耳返体验仍存在较大的工作量和难度,主要体现在三个层面:


  1. 对接复杂:耳返优化的功能目前并非通用功能,需要 app 开发者获取具体厂商系统的使用权限,将 app 开发者的应用包添加到手机厂商系统的白名单中,app 应用才能使用耳返功能。

  2. 工作量大:各手机厂商的耳返优化功能都是使用私有接口实现,开发者需要调用不同厂商的不同接口来实现对不同手机机型的耳返适配。

  3. 效果不一:各厂商针对耳返优化的效果不一,要适配众多厂商机型,获得较为一致的超低延时、超低噪声耳返体验,难度较大。



针对这些难题,声网 Agora 的超低延时耳返解决方案实现了统一适配手机机型,针对不同手机厂商里支持耳返延迟优化功能的各类机型上进行了适配,K 歌、直播类 app 无需再针对不同机型进行适配,只需通过 Agora SDK 耳返接口进行调用即可获得低延时耳返能力。同时声网 Agora 拥有业内领先的音视频技术,通过与主流手机厂商进行深度技术合作,针对支持耳返功能的主流机型进行深度适配优化,大大降低了 K 歌时耳返的延时,将传统耳返的 100-300ms 的延时降低到 50ms 左右,达到行业领先水平,全面提升 K 歌的体验。


AI 音频降噪搭配美声音效 实现极致 K 歌体验


得益于声网 Agora 拥有的业内领先的音视频整体方案,Agora 音视频 SDK 还拥有超低噪声、美声音效的能力。声网 Agora SDK 拥有业界领先的 AI 音频降噪技术,可基于深度神经网络模型,实现人声和背景噪声的实时分离,有效抑制直播、在线 K 歌中的喷麦、啸叫、突发噪声等常见噪声,并自适应各种声学结构,让集成和调试效率更高,同时可以支持 Android、iOS、Windows、Mac、小程序等多种平台。最终在不依赖任何硬件的基础上,实现对背景噪声的自动消除,帮助用户更清晰的听到背景音乐。


在线 K 歌的过程中,在保障超低延时、超低噪声的耳返体验的同时,如果还能实现声音美化、虚拟音效,那无疑就更加锦上添花了。声网 Agora SDK 的美声音效解决方案,通过对频谱上各个频段进行智能增益,弥补音色缺陷,美化声音。在美声方面拥有清新、活力、磁性、高亢、嘹亮等多种美声效果。在音效方面,则提供电音、KTV、演唱会、录音棚、留声机、R&B 等丰富的虚拟场景音效,再配合超低延时耳返功能,用户可以享受到极致的 K 歌体验。


本文转载自 声网 Agora 公众号。


原文链接:https://mp.weixin.qq.com/s/kL8KZYbx3Yi7w0lyHS5L_A


2020-05-06 10:251930

评论

发布
暂无评论
发现更多内容

3 个技巧,让你像技术专家一样解决编码问题

LigaAI

程序人生 技术专家 技术人成长 问题分析及解决 企业号 6 月 PK 榜

数据可视化设计四大原则透析

搞大屏的小北

数据可视化 设计要素 大屏设计

科兴未来|2023”福地句才”海外人才创业大赛

科兴未来News

科兴未来|2023年扬中高层次人才创新创业大赛

科兴未来News

【零售电商系列】走进亚马逊之自建仓储&物流

小诚信驿站

6 月 优质更文活动

智慧生活垃圾焚烧发电厂Web3D可视化平台

2D3D前端可视化开发

物联网 数字孪生 三维可视化 工业组态 智慧垃圾焚烧发电厂

“数字创新产品课程”7月29-30日 · CSPO认证周末班【提前报名特惠】CST导师亲授

ShineScrum

Java线程池三、调优和性能优化

echoes

Java 线程池

浪潮 KaiwuDB x 大数据中心 | 数据驱动政府治理能力快速提升

KaiwuDB

KaiwuDB 大数据中心建设

千万级数据的可视化交互展示:Vue.js 技术解析

xfgg

Vue eCharts 6 月 优质更文活动

分享几款 Mac 上非常好用的的免费软件

搞大屏的小北

数据可视化 数据库工具 截图软件 视屏转 gif 视频号下载

精耕丝路,智胜全球 | 新华三助力中企跑好“出海”赛道

新消费日报

短视频云端批量混剪实操指南

阿里云CloudImagine

云计算 短视频 视频云 云剪辑

【Netty】「萌新入门」(一)Hello, World!

sidiot

Java 后端 Netty 6 月 优质更文活动

“敏捷教练进阶课程”7月22-23日 ·A-CSM认证在线周末班【提前报名特惠】CST导师亲授

ShineScrum

敏捷教练

教培行业的“智能GPT私教”?WorkPlusAI助理帮助教培机构实现十倍人效!

BeeWorks

Amazon CodeWhisperer 编程助手试用总结

Hanson

构建系列之新一代利器Esbuild(上)

江湖修行

cli 构建 esbuild 前端‘’

喜讯 | 华秋电子荣获证券时报年度高成长企业

华秋电子

平台即产品:数字化转型的全新驱动力

SEAL安全

平台工程 平台即产品

深度学习应用篇-自然语言处理-命名实体识别[9]:BiLSTM+CRF实现命名实体识别、实体、关系、属性抽取实战项目合集(含智能标注)

汀丶人工智能

人工智能 自然语言处理 深度学习 命名实体识别 6 月 优质更文活动

数据分析:电子商务需要关注的重要指标有哪些?

搞大屏的小北

电子商务 销售指标

Win服务器图床配置

路北路陈

6 月 优质更文活动

DevEco创建项目时的错误解决

路北路陈

6 月 优质更文活动

直播回顾 | 一体化智能可观测平台如何保障电商节大促

博睿数据

可观测性 智能运维 博睿数据 618 电商行业

赋能矿山 | KaiwuDB 智慧矿山解决方案

KaiwuDB

解决方案 智慧矿山 KaiwuDB

深度学习应用篇-自然语言处理[10]:N-Gram、SimCSE介绍,更多技术:数据增强、智能标注、多分类算法、文本信息抽取、多模态信息抽取、模型压缩算法等

汀丶人工智能

人工智能 自然语言处理 深度学习 命名实体识别 6 月 优质更文活动

通过技术变革,推动全面预算管理前行

智达方通

全面预算管理

相约未名湖畔,百度商业AI技术创新大赛携手北大学子共探AI发展

百度Geek说

人工智能 百度 企业号 6 月 PK 榜

Flink实现高效实时处理百万级数据:实践与优化

xfgg

flink 6 月 优质更文活动

HummerRisk获中国开源创新大赛优秀奖

HummerCloud

开源 云安全

声网Agora SDK支持50ms超低延时耳返 适配主流手机机型_语言 & 开发_RTE开发者社区_InfoQ精选文章