【AICon】探索八个行业创新案例,教你在教育、金融、医疗、法律等领域实践大模型技术! >>> 了解详情
写点什么

不挡脸,放肆看!B 站黑科技蒙版弹幕揭秘

  • 2018-08-13
  • 本文字数:1980 字

    阅读完需:约 6 分钟

身为 B 站老司机的你,是不是总会在自己喜爱的 UP 主或者热门的视频中遇到如下情况:

或者这样“前方高能”类型的挡脸弹幕:

说起来,我们当然知道弹幕刷屏是大家表达对 UP 主或者视频中人物喜爱的方式,但是作为粉丝,爱豆的颜被厚厚的弹幕挡得严严实实实在是不爽的体验啊!

(╯‵□′)╯︵┻━┻

有人可能会说:可以关弹幕啊。

But,在 B 站关弹幕看视频,那就完全丧失了乐趣好伐?!

Ummmmm,还挺难伺候。

于是,B 站为了提升各路用户老爷们的体验,推出了这样一种蒙版弹幕技术。这一技术背后的男人:光驱子,也被小编从社交平台上挖了出来 ( •̀ ω •́ )✧强行进行了一番采访。

光驱子,加入 B 站到现在已有三年,算得上是一个老员工。加入 B 站后,主要负责弹幕的相关工作,包括产品和运营,期间也曾主要负责过比如手机版主站,创作中心等等项目。

光驱子告诉我们,开发这一弹幕技术的初衷,除了为了满足用户的需求,还有一些个人体验方面的考虑。

他说:首先开发蒙版弹幕的目的不仅仅是因为刷屏这一个原因而存在的。想必之前大部分未曾使用过弹幕功能的用户都会觉得,弹幕这种东西,总是遮挡我想看的内容,真的非常讨厌。然而刷屏仅仅是遮挡的一种情况而已。实际只要想看的内容和弹幕正好重叠,就会产生和刷屏一样的问题。

所以,光驱子和团队的产品思路就已经非常明确了,那就是:只要弹幕不去遮挡想看的内容就可以了。

为什么叫它“蒙版弹幕”,光驱子告诉我们:“我们的前端实现方法就正如 PS 中的‘蒙版’一样,实心区域允许,空白区域拒绝。而技术的核心就在蒙版的生成上,所以将这个功能称之为‘蒙版弹幕’。”

同时,他还为我们揭露了一些技术原理:通过计算机视觉的技术,对视频内容进行分析,并将之前已经定义好的“视频主体内容”进行识别,生成蒙版并分发给客户端后,让客户端利用 CSS3 的特性进行渲染从而达成最终的效果。这样就形成了我们最终看到的,“不挡脸”弹幕效果:

弹幕“穿”雷总而过

妹子舞蹈的流畅动作再也不用担心看不清了!

不过,我们在测试的过程中还是产生了一些疑问:目前可供体验的视频基本上都是以三次元真实的人作为视频主体,难道说视频主体为二次元纸片人的时候,蒙版弹幕暂时不起作用?

光驱子答道:“确实,假设我们仅仅对一个单独的视频进行分析,可能我们就‘万策尽きた’(无计可施)了。但是我们可以作为视频主体内容判断的参考的不仅仅是视频本身。用户投稿的分区,标签,简介,甚至于 UP 主的过往投稿都会被我们作为参考。

举个例子,一位 UP 主在科技区中投稿了个评测视频,我们在视频中发现其中“手机”这个元素在视频的 50% 以上时长都出现了,那么我们就可以认为手机应该也是视频主体内容的一部分。生成蒙版时自然就可以起到同样的效果。”

光驱子说,二次元视频相对于三次元视频元素拥有更多艺术表现形式,也因此实际效果差异较大。但他们将持续进行算法调研,以便未来能够支持更大范围内的视频。

不过,据了解,不论视频主体是二次元还是三次元,总体的技术都是相同的,并无太大区别。 而可见的最大难点便是训练,这是相当费时费力的过程。

目前,蒙版弹幕技术已经在效果上最稳定,同时需求更迫切的舞蹈区进行小范围应用,之后将会逐步扩大使用范围。可供测试的视频见此链接(戳阅读原文可以直达视频页面哦  ( •̀ ω •́ )✧):

https://www.bilibili.com/read/cv534194

简单的说,它的开启方式是这样的: 

  • 第一步:打开特定的舞蹈区视频内容(web 端播放器需为 H5 播放器)

  • 第二步:在内心默念咒语 bilibili 干杯 233 遍

  • 第三步:在屏幕前连续打 call 大约 23 分钟

  • 第四步:在播放器弹幕开关内的设置选项中勾选:智能防挡弹幕  

以上都是逗你玩的 prprprpr

    功能发布之后,蒙版弹幕团队也收集到了很多用户反馈,包括移动端支持的需求,浏览器兼容性,以及一些蒙版不够完美的问题。

    收到众多宝贵意见的同时,大部分用户在站内专栏和微博上也都表达了出了对这个功能的惊艳感和对未来应用的期待。光驱子说:“我们可以说非常的开心和自豪,也非常感谢大家的支持。”

    光驱子还告诉我们,接下来蒙版弹幕技术团队将会加快这一技术在移动端的使用,短期内前端开发组的同学将会对性能和兼容性上进行优化,而蒙版生成方面我们仍将不停的优化调整算法。未来还将会把这一功能扩展到二次元内容和直播业务上。

    对于 B 站这样浓厚 ACG 氛围公司的技术团队,我们很是好奇他们的工作方式会有什么不同,所以在采访中,我们优先问了这样的问题,得到的回答也蛮有意思:

    “就工作流程上而言其实和其他的技术公司并无太大不同。但是因为我们都喜欢 ACGN,所以在工作中都会有意无意的像调味料一样,添加这些元素到我们所开发的产品里来。像使用角色名命名项目,评审需求时圈内骚话漫天飞等等等等。这些都让可能本来严肃紧张的工作变得更加轻松愉快起来。”

    2018-08-13 19:005271
    用户头像
    陈思 InfoQ编辑

    发布了 576 篇内容, 共 262.8 次阅读, 收获喜欢 1293 次。

    关注

    评论 1 条评论

    发布
    暂无评论
    发现更多内容

    商品管理系统:服装品牌提升工作效率的利器

    第七在线

    理论与实战:一篇看懂Python词云

    不在线第一只蜗牛

    Python 前端 开发语言

    裁员+失恋或许不能比这更遭了,敬一塌糊涂与充满感动的2023,也敬曾经的挚爱与寒冬的冰霜

    小明Java问道之路

    WIFI 6E/IPQ5018 WITH QCN9074 Deliver new data experiences

    wallysSK

    Office 365 Mac破解版

    iMac小白

    Go中最常用的数据校验库

    fliter

    DevEco Studio 4.1带来多种调试能力,助力鸿蒙原生应用开发高效调试

    新消费日报

    Wall Clock与Monotonic Clock

    fliter

    基于低代码的任务管理平台开发:简化工作流程,提高工作效率

    快乐非自愿限量之名

    低代码 数字化 低代码开发 项目开发

    雷军不再主讲小米手机发布会;苹果明确:Vision Pro 头显电池某些场景会降低其性能丨 RTE 开发者日报 Vol.142

    声网

    企业网络采用SD-WAN的优势

    Ogcloud

    SD-WAN SD-WAN组网 SD-WAN服务商

    已有天翼云Ubuntu云主机,搭建幻兽帕鲁服务器

    天翼云开发者社区

    云计算 云主机 云服务器

    区块链游戏解说:Axie Infinity 是什么

    Footprint Analytics

    NFT

    一张“哑火”的AI禁令

    脑极体

    AI

    6个.NET开源且强大的快速开发框架(帮助你提高生产效率)

    EquatorCoco

    .net 开源 开发 框架

    SD-WAN的安全性体现在哪里?

    Ogcloud

    SD-WAN SD-WAN组网 SD-WAN服务商

    商品信息全景图:API接口在聚合商品数据中的应用

    Noah

    Video Copilot Element 3D for Mac(AE三维模型插件) v2.2.3.2190激活版

    iMac小白

    唯品会商品详情数据接口Python

    tbapi

    唯品会商品列表数据接口 唯品会API接口 唯品会商品数据接口 唯品会商品数据采集接口

    自然语言开发AI应用,利用云雀大模型打造自己的专属AI机器人

    快乐非自愿限量之名

    人工智能 AI 自然语言 大模型

    如何用ETL工具实现API调用

    RestCloud

    ETL 数据集成 API调用

    CubeFS源码分析系列(一) 创建Volume

    总想做点什么

    SD-WAN:企业网络转型的不可逆趋势

    Ogcloud

    SD-WAN SD-WAN组网 SD-WAN服务商

    云上未来:探索云计算的技术变革与应用趋势

    快乐非自愿限量之名

    云计算 运维 服务器

    平台+低代码:中小企业数字化转型普惠之路

    EquatorCoco

    低代码 数字化 平台 企业转型

    低代码平台四大常见用例开发:简化企业数字化进程

    不在线第一只蜗牛

    低代码 数字化 项目开发 企业转型

    利用技术潜能实现企业全面预算管理的智能化转型

    智达方通

    信息技术 财务分析 全面预算管理 财务规划

    pd虚拟机专用windows系统镜像(m1/intel)

    iMac小白

    Mocaverse NFT 概览与数据分析

    Footprint Analytics

    NFT

    八种常见的云存储安全风险及防护建议

    伤感汤姆布利柏

    聚道云软件连接器:连接薪人薪事与携程商旅的桥梁,出差管理效率的新篇章

    聚道云软件连接器

    案例分享

    不挡脸,放肆看!B站黑科技蒙版弹幕揭秘_语言 & 开发_陈思_InfoQ精选文章