Facebook、LinkedIn、Airbnb、Google 专家聚首 QCon,他们会带来什么?

阅读数:1199 2017 年 2 月 23 日

话题:QConDevOps语言 & 开发架构文化 & 方法AI

4 月 16 日~18 日,QCon 北京 2017 将在北京国家会议中心举行。现已确认来自海外的 Google、Facebook、Airbnb、LinkedIn、Confluent、AppDynamics 等公司,国内的百度、阿里巴巴、腾讯、京东、滴滴出行、奇虎 360、爱奇艺、微博、bilibili 等公司的 100 余位技术专家担任演讲嘉宾,届时他们将带来精彩分享。

具体会有哪些专家,带来什么样的议题呢?一起先睹为快。

易成,Google 高级工程师,专注于计算机网络及分布式系统。2014 年加入谷歌网络基建部门,主要负责网络负载平衡,全球前端负载平衡,高性能网络流量处理,以及网络功能虚拟化等。2016 年作为主要作者之一在 NSDI 会议上发表了论文《Maglev: A Fast and Reliable Software Network Load Balancer》,引起业界广泛关注。

他将分享《Maglev 网络负载平衡系统》。

Maglev 是谷歌研发的网络负载平衡系统。该系统被部署在谷歌位于全球各地的数据中心内,负责转发绝大多数谷歌原生服务及云服务的前端流量。Maglev 本质上是一个运行在普通商用 Linux 服务器上的分布式软件系统。相比于传统的硬件实现,Maglev 拥有高吞吐量,高容错性,易扩展,易部署,易修改等优势。同时 Maglev 中使用的 consistent hashing 和 kernal bypass 等技术很好地弥补了软件实现上的不足。实践证明 Maglev 系统能够提供卓越的性能、稳定性及可靠性,并且可以满足不同服务的需要。

通过该分享,听众可以了解用软件来实现网络负载平衡的动机,软件实现所遇到的困难和挑战,以及 Maglev 系统的设计和实现。

另一位来自 Google 的工程师是朱祖韬。从 2010 年起,朱祖韬任职于 Google 在线显示广告部门,专注于卖方平台(DoubleClick for Publisher)和在线交易平台(Ad Exchange)的产品,及机器学习在其中的应用。对于广告的买方、卖方及中间的交易平台有深入的了解。他拥有多项美国和国际的专利。他将分享《视频广告系统架构及机器学习应用》。

我们还邀请到 Facebook 旗下 Instagram 基础架构部门工程师陈昊。他硕士毕业于中科院软件所,之后加入 Facebook,就职于 Instagram Infrastructure 组,主要负责 Instagram 的 Web Service 的性能和可靠性优化工作。他将分享《Instagram 服务器性能优化实战与经验》。

Instagram 目前拥有超过 6 亿月活用户,是用户规模增长最快的社交平台之一。Instagram 的 Web 服务器使用 Python 编写,拥有目前世界上最大的基于 Django 的 Web Service 集群。随着用户数量和和业务规模的极速增长,提高 Web 服务器的性能和可靠性对于 Instagram 是一个巨大的挑战。本次演讲将介绍 Instagram 如何通过工具定位系统性能瓶颈、自动化检测性能 regression,并通过几个具体实例向大家介绍 Instagram 在性能优化方面的一些经验。

InfoQ 之前曾发布过《禁用 Python 的 GC 机制后,Instagram 性能提升 10%》一文,介绍的就是他们组的工作。

龙玺,Airbnb 工程经理。任中国基础架构(China Infrastructure)组工程经理。负责与 Airbnb 中国产品相关的基础架构和后端服务,并兼管中国区反欺诈(Anti-fraud)业务。此前历任美国亚马逊网站应用平台部门软件工程师,Kindle 部门软件开发经理和 Airbnb 数据基础架构组软件工程师。主要负责大数据基础架构和机器学习基础架构,拥有多项国际专利。他将分享《AirTrain:Airbnb 的通用数据产品平台》。

随着业务的快速增长,Airbnb 正经历着一场对数据使用模式的根本性转变。早期 Airbnb 对数据的使用主要集中在离线数据分析和使用上。

近几年来,越来越多的具有强烈数据依赖特征的在线应用开始逐步上线。这些应用所依赖的数据也逐步从离线批处理向实时的流数据转移。在这样的大背景下,Airbnb 数据基础架构团队自主开发了基于 Kafka,Spark 和 HBase 的通用数据提取(derivation),聚集(aggregation)和存储(storage)平台——AirTrain。本演讲将从机器学习应用和非机器学习应用两个不同的角度对 Airtrain 的架构进行系统介绍,并且着重讨论一些在开发过程中的需求和设计思路。

Apache Kafka 大家应该非常熟悉了,而 Confluent 正是最初设计 Kafka 的团队成立的公司。这次我们邀请到来自 Confluent 的王国璋,他是 Kafka Streams 的系统架构师和技术负责人。博士毕业于康奈尔大学。主要研究方向为数据库管理和分布式数据系统。他将带来的话题是《Apache Kafka:大数据的实时处理时代》。

在过去几年,对于 Apache Kafka 的使用范畴已经远不仅是分布式的消息系统:我们可以将每一次用户点击,每一个数据库更改,每一条日志的生成,都转化成实时的结构化数据流,更早的存储和分析它们,并从中获得价值。同时,越来越多的企业应用也开始从批处理数据平台向实时的流数据数据平台转移。本演讲将介绍最近 Apache Kafka 添加的一些系统架构,包括 Kafka Connect 和 Kafka Streams,并且描述一些如何使用它们的实际应用体验。

我们也邀请到多位 LinkedIn 的技术专家。

胡克秋,LinkedIn 移动基础设施组主管软件工程师,负责 LinkedIn 移动基础架构,持续集成与持续交付系统。致力于提升移动开发人员的工作效率,提高持续交付的质量,稳定性与速度。拥有丰富的实践经验,带领团队成功将 LinkedIn iOS 的交付周期从一个月提速到一周。最近开源了一个多模拟器并行跑 iOS UI 测试的工具:Bluepill。他将分享《3 x 3:提速移动 App 交付》。

介绍 LinkedIn 如何从之前的一个月交付一次移动 App 到目前的一周发布一次。

  • 为什么 LinkedIn 敢于在没有任何手工测试的情况下发布 App;
  • LinkedIn 如何大规模使用 UI 测试并解决 UI 测试中的不稳定因素;
  • LinkedIn 如何在 15 分钟内跑完上千个 UI 测试;
  • 用 Swift 写 App 的一些坑。

这次也邀请了一位横跨学术界和工业界的专家——NimbleDroid CEO、哥伦比亚大学教授杨峻峰。他于清华大学获得计算机学士学位,于斯坦福大学获得计算机博士学位,在微软短暂工作一年后加盟哥伦比亚大学担任教授,他的创新成果获得多项美国最杰出的科研奖,也被工业界广为采用。他所创建的 NimbleDroid 公司,旨在打造最先进的工具和平台,帮助全世界的团队更快的开发更好的 App。他将分享《用人工智能来高效测试 App》。

在 App 迭代越来越快,时间就是一切的年代,怎样才能提高 App 的开发和测试效率,同时保证优质的 App?

手工测试方法完全依赖测试人员。现有的测试自动化的产品仅仅能够完成有限的自动化,还是需要开发者花大量时间写脚本,更新脚本,以及分析结果。这些传统测试方法已不能跟上快捷开发的步伐。

在这个演讲里,杨教授会讲述怎样用人工智能的方法实现 App 测试的高度自动化,帮助开发和测试人员节省时间,打造高质量的 App,让用户体验更美好。我们用这个方法测试了几十万个应用。在本次演讲中会介绍一些重要的发现,包括提高 App 质量和性能的最佳实践。

Apache Beam 是新兴的大数据处理框架,由 Google 贡献给开源社区。这次我们邀请了 Apache Beam 贡献者、PMC 成员 Amit Sela。他也是 PayPal 的架构师,致力于 PayPal 下一代流处理大数据平台的研发。他将分享《深入理解 Apache Beam》。

Apache Beam 凝聚着 Google 研发大数据基础设施的多年经验。Beam 来源于 Batch(批处理)和 strEAM(流处理)这两个词,意在提供一个统一的编程模型,同时支持批处理和流处理。本次演讲中,Amit 将介绍 Beam 处理大规模乱序流数据的基础,以及 Beam 提供的强大工具。

随着云计算的普及,很多开发工作也越来越依赖云基础设施。Lambda Lab 联合创始人赵扶摇会来 QCon 聊聊开发工具的云端化。在创业之前,他在 Google 的工具与效率部参与开发了云端构建平台 Blaze/Forge,代码理解系统 Grok,Android Studio IDE 等前沿工具产品并发表相关专利。他要分享的主要内容是:

开发工具云端化已经成为提高企业开发团队开发效率的重要手段。Google 作为互联网公司领头羊,在过去十年间建立了完整的云端开发工具链,这个工具链完美地整合了各个工作流程,极大提高了工程师的工作效率以及员工的培训成本。其他的互联网公司如 Twitter,Facebook 也跟随 Google 的步伐开发类似的工具。我们以 Google 为主要范例,讨论单根代码树,云端构建与测试,代码智能等技术与实践,分析技术挑战并讨论对其他公司的工具建设有什么启发。

更多精彩内容,可以查看 QCon 大会官网:http://2017.qconbeijing.com。3 月 12 日前报名,可享 8 折优惠。