快手与清华成立未来媒体数据联合研究院

  • 陈利鑫

2018 年 4 月 3 日

话题:语言 & 开发架构

看新闻很累?看技术新闻更累?试试下载 InfoQ 手机客户端,每天上下班路上听新闻,有趣还有料!

导读:继 2014 年成立人工智能实验室 Y-Lab 之后,风靡的短视频平台快手又在 AI 方面有了一些动作:成立快手与清华大学未来媒体数据联合研究院(Institute of Future Media Data,简称 FMD),启动仪式如期在清华校园举行,不知仪式上双方会宣布哪些合作呢?

快手与清华大学成立未来媒体数据联合研究院

2018 年 4 月 3 日,快手与清华大学未来媒体数据联合研究院启动仪式在清华校园开启。快手方面表示,快手和清华大学合作的目的在于“实现双方的互补多赢,整合清华大学在计算机图形学、图像处理、大数据和人工智能等领域的研发能力和学术影响力,结合快手在互联网领域的应用和用户优势,共同在学术研究和项目开发等方面合作,共同拓展社会影响力。”

清华大学党委常委、副校长尤政在致辞表示双方合作共赢之后,快手创始人兼 CEO 宿华走向舞台中央。

快手创始人兼 CEO 宿华

他在演讲中表示,经过一年的时间,快手与清华大学的合作终于落地,成立了清华 - 快手未来媒体数据联合研究院。谈到为什么将项目命名为“未来媒体数据联合研究院”,宿华表示,这是因为他认为未来的媒体已经与之前完全不同,在他看来,未来的媒体 = 记录 + 传播,而现在和将来,媒体 + 记录的载体将发生变化,每个人都将成为记录者,未来媒体也会有三大特征:

技术能力是未来媒体间这种最重要的底层能力;未来媒体需要人文社会科学智慧共同参与;数据是未来媒体最核心、最主要的能源。基于未来媒体的特征,快手推进了与清华等高校的合作。

宿华在发布会上表明了快手与清华的合作图景,即跨界融合,结合清华大学软件学院的技术和清华大学新闻学院社会学系的人文素养,以解决社会课题,校准技术方向。

在技术方面,快手 CTO 陈定佳为我们揭示了研究院为爱的合作方向,大致为计算机图像学、计算机图像处理、大数据、人工智能、多媒体技术、人机交互技术。

陈定佳说道,让每个人获得独特的幸福感是快手的愿景 ,通过使用 AI 和大数据技术,以及万亿级特征大数据,快手希望可以让用户获得幸福感。

随后,陈定佳向我们大致讲解了快手使用的框架和学习引擎。他说道,为了解决机型不同引起的各种问题,突破设备能力的限制,快手采用了高性能多媒体处理框架和深度学习引擎。



针对不同机型,快手自研的 YCNN 深度学习引擎,让处理速度提升 50%,达到业界顶尖水平,用户可实时使用高质量特效。快手的多媒体处理框架可以完成视频处理、音频处理、音视频编解码、2D 和 3D 渲染,以及动画效果,用户可以对自己的作品进行拍摄编辑、视觉特效、魔法表情、姿态识别和 AR 特效处理。

快手还能够突破地域、网络的限制,自适应传输协议可以动态调整内核参数、数据分片、并发链路 KTP 协议可以容忍 80% 的丢包率。快手的智能编解码技术可以根据不同内容和场景复杂度,不同编码复杂度优化提升 10%。

多媒体内容理解算法及平台

为了更好地了解用户,快手开发了自己的多媒体内容理解算法及平台,可以进行人脸、图像、音乐和语音处理。



实时在线学习推荐系统



发布会上,陈定佳还发布了和清华联合研究的首批 35 个技术课题,包括:

  1. 无监督学习与高效率学习网络模型
  2. 真是世界模拟与移动端富体验互动技术
  3. 知识图谱、多模态信息融合模型与推荐技术
  4. 流媒体的人工智能信息提取、索引和分类理论与方法
  5. 场景信息理解与可控生成技术的研究与应用
  6. 海量视频数据传输与处理的优化技术

跨界研究课题包括媒介传播、舆情分析与媒介理论研究、短视频技术与传播开放平台构建与研究、人与人的影响粘连:民间原生影像的传播路径与研究等。

一家人工智能公司

作为一家短视频平台,快手从短视频浪潮的激烈竞争中脱颖而出,其另辟蹊径主攻二三线城市市场的做法也获得了巨大的回报,据说早在 2018 年初估值已超过 180 亿美元。

自 2011 年成立起,这家公司已经获得了众多资本的青睐:2017 年 3 月,腾讯领投 3.5 亿美元;2018 年初,B 轮融资投资方红杉跟进,10 亿美元,融资后估值 180 亿美元。据证实,“快手”最快将于今年下半年来港挂牌,估值更达 1409 亿元。作为内地短视频界的龙头之一,快手每日活跃用户超过 1 亿,但目前仍未有关于收入和利润的信息曝光。

相比之下,国内外的短视频平台竞争激烈,如火山小视频、抖音等。据 3 月 27 日第三方数据机构易观千帆发布的《中国短视频行业年度盘点分析 2018》报告显示,快手是目前唯一一款月活用户破 2 亿的短视频 App,以 21883.78 万人的月活跃用户数位居微信、QQ 及微博之后,稳居国内第四大社交平台。值得一提的是,快手的日活用户数达到 10812.67 万,远超抖音的 4397.72 万、西瓜视频 2915、39 万以及火山小视频的 2667.4 万,甚至比头条系抖音、西瓜、火山三个短视频平台的日活用户量加起来还多出 832.16 万,后三者与快手之间的差距出现增大的趋势。而在发布会上,宿华更新了数据,快手的日活用户已达 1.2 亿,每天 UGC 视频上传数量大 1500 万条,用户日均使用时长 60 分钟,日均视频播放量 150 亿次。

在多如牛毛,已经杀成红海的短视频市场,为何快手能够冲出重围获得一席之地,或许与其将 AI 和算法分发等技术应用于产品短视频内容信息流等做法有关。也许很多用户都没发现,自己熟悉的快手用户界面,其实是算法根据他们的喜好推荐的内容,视频中一些“特技”也是 AI 工程师手下的作品。在 AI 技术开发商,快手有自己的研发团队——Y-Lab。

AI 实验室 Y-Lab

据了解,Y-Lab 于 2016 年 9 月成立,研究领域涉及人工智能、机器学习、计算机视觉和计算机图形学等。在快手的诠释里,Y-Lab 的名字其实暗含赶超著名的 GoogleX 实验室的含义,其中 Y 代表 Young,Y 是 x 的下一个字母,所以也代表着超越 x。

Y-Lab 的负责人郑文在清华毕业后在美国斯坦福计算机系读博士,其导师专注于电影特效,并两次获得奥斯卡科技奖。在博士期间,郑文的研究方向主要集中在计算机图形学和电影特效方面,毕业之后也一直在美国从事机器学习和计算机视觉相关的研究。

Y-Lab 的成果早已被应用于快手的产品中,帮助用户直接将背景抠掉,换成自带背景;利用 AR 技术,使得人们通过手机摄像头拍出虚拟的、逐步盛开的多肉花朵;人体姿态捕捉技术主要在手机端运转,且不需要用户进行任何外带设备的佩戴,手机摄像头会自动捕捉用户的身体部位和动作进行特效转化,变为影视剧作品中的角色。

但来自抖音的品牌升级,“被复活”的微视等其他竞品的压力,快手也不是高枕无忧。在未来,AI 技术用于各行各业是大势所趋,任何行业都不例外,采用了 AI 技术的平台会显示出越来越大的优势,想要迎头赶上或者不落伍,就得在技术开发山下苦功,做出真正能够满足用户需求,解决用户痛点的产品,才会成为最后的赢家。

这次与清华成立未来媒体数据联合研究院只是个开始,未来短视频平台快手和科研院校之间的合作还会碰撞出什么火花,我们拭目以待。


感谢徐川对本文的审校。

给 InfoQ 中文站投稿或者参与内容翻译工作,请邮件至editors@cn.infoq.com。也欢迎大家通过新浪微博(@InfoQ@丁晓昀),微信(微信号:InfoQChina)关注我们。

语言 & 开发架构