AI 在游戏内容自动化创作上的落地

在 AICon 北京 2019 大会上，孙子荀讲师做了《AI 在游戏内容自动化创作上的落地》主题演讲，主要内容如下。

演讲简介：

随着内容产业的发展，AI 算法能力的表现进一步提升。国内外越来越多的互联网公司开始尝试进行自动的内容生产。传统媒体、MCN 机构也开始接受通过 AI 辅助内容创作。 腾讯游戏也有专门的团队进行自动化游戏内容创作的研究和探索工作。这次报告我们也介绍一下团队模型使用和业务落地过程中的经验，期待同样场景的研究人员互相交流。

一 游戏视频分析

1.1 游戏角色跟踪

1.2 游戏高光片段识别

1.3 游戏场景的目标检测

1.4 游戏海报的分割和评价算法

1.5 基于游戏引擎的自动样本生成

1.6 游戏场景坐标还原

1.7 结构化游戏视频分析实践

二 游戏内容素材创作

2.1 战报文本素材生成

2.1.1 基于 table2txt

2.1.2 基于 GPT2

2.1.3 文档规划器

2.2 游戏解说语音素材合成

2.3 角色动画素材生成

2.3.1 姿态捕捉

2.3.2 引擎渲染

2.4 视频封面图和标题的生成

三 游戏内容生产

3.1 预定义剧本模式创作

3.2 素材多样性问题

3.3 处理关键点分析技术

3.4 成片特效渲染

听众受益点：

自然场景的模型很多无法顺利落地游戏场景，我们做了很多 CV 算法上的改进工作。过程中的技术经验不仅仅可以落地于游戏，也可以推广至自然场景。

1. 收获 AI 算法在内容创作上合理落地的建议和经验

2. 收获 AI 算法在游戏场景和自然场景下的选型优化

3. 了解计算机视觉和游戏引擎的结合如何能提升 AI 算法表现

前沿亮点：

把 CV 和 CG 技术无缝结合，通过 CV 的多任务还原用户游戏操作行为

听懂我的演讲，需要具备这些知识储备：需要有一定的深度学习，CV 和 NLP 基础知识

讲师介绍：

孙子荀，腾讯专家研究员（T4）。

腾讯专家研究员，负责腾讯游戏内容的算法工作。连续三年公司优秀讲师，在百度和腾讯期间多次获得公司级最高技术奖。

2009-2011 年 从事分布式的算法研究工作，2011 年在百度从事 HPC 并行化算法的落地。2012 年加入腾讯，2015 年起从无到有带领团队构建了信息流的内容工程和算法平台。一直从事负责内容处理，内容理解与生成的算法研究和落地工作。个人在内容质量、AI 内容生成上有较好的落地经验。和团队一起在 KDD，ICCV 等学术会议上有多篇论文发表，并作口头报告；在内容算法场景也有 30 多篇授权专利。

完整演讲 PPT 下载链接：

https://aicon.infoq.cn/2019/beijing/schedule