免费下载!由 O’Reilly 出版的《NGINX 完全指南》中文版已正式上线 了解详情
写点什么

聚焦技术和实践,腾讯全面揭秘基础设施和大数据演进之路

  • 2019-11-11
  • 本文字数:2745 字

    阅读完需:约 9 分钟

聚焦技术和实践,腾讯全面揭秘基础设施和大数据演进之路

“开发者是推动技术发展的主力军,数字社会向前的每一步,都离不开广大开发者。作为数字化转型助手,腾讯云将秉持“开源、共享、创新”的三大理念持续助力开发者的个人成长和价值创造,目前,腾讯云已经服务了数百万开发者,给到开发者的资源扶持超过 100 亿元。”腾讯公司副总裁、腾讯云总裁邱跃鹏在 Techo 开发者大会表示。



腾讯公司副总裁、腾讯云总裁 邱跃鹏


Techo 是腾讯云面向全球开发者和技术爱好者发起的,专注于探讨云计算前沿技术趋势和应用实践领域的的非商业大会,通过搭建一个纯粹的技术交流和共享平台,与数千万开发者们共同探索、共同创造。本次大会汇集了 150 多位海内外技术专家和来自全球各地的数千万位开发者和技术爱好者,全面解读了当前云计算、大数据、人工智能、物联网、音视频、边缘计算、无服务计算、云原生、安全等领域的最新技术态势和最佳落地实践。

云计算技术未来三大重要趋势

云计算的使命之一就是为开发者提供更高效、更便捷、更先进的开发环境和工具,让开发者更好地解决问题,实现自己的创意、释放创造的价值。对于未来云计算技术的演进,邱跃鹏在大会致辞时表示:云计算未来有三大趋势,即软硬件一体化(Cloud Native Hardware)、无服务器计算(Serverless)和智能化(Smart)。


邱跃鹏指出,随着云计算承载的业务规模越来越大,软件和硬件的结合成为刚需。软硬件一体化技术会进一步发展,为开发者提供更强壮的基础设施平台,提升云计算的性能、提高资源利用率,最终为开发者提供稳定、更具性价比的服务。软硬件一体化带来的技术红利,值得每一位开发者关注。


同时,无服务器计算,即 Serverless 正在快速演进。Serverless 能把开发者从繁琐、冗杂的开发配置工作中解放出来,不需要任何的基础设施建设、管理与运维,极大降低了开发门槛,开发者只需关注自己的业务逻辑。以腾讯云和微信联合推出的“小程序·云开发”为例,上线一年已经服务超过 50 万开发者。“小程序·云开发”让更多开发者实现他们的小程序梦想,未来,Serverless 理念会在更多开发场景中落地。


随着硬件红利不断释放、开发者越来越关注于自己的应用,数字化进程不断加快。随之而来的数据量不断增长,对算力的要求越来越高,人工智能也成为开发者们必须关注和应用的技术。人工智能正在快速演进,云厂商也将会提供更多人工智能产品和能力给到开发者。

首次全面揭秘基础设施和大数据技术演进全貌

作为全球最大的互联网公司之一,腾讯无论在基础架构还是大数据 AI 领域的实践,都极具代表性。这次作为腾讯云在两大领域的技术负责人,首次全面披露腾讯 20 年在这块的技术积累。


腾讯云副总裁、云架构平台部总经理谢明表示:“无论是从使用通用服务器到不久前发布的“为云而生”的服务器星星海,还是从第一代数据中心中传统的电信解决方案到如今第四代的 T-block 产品家族,腾讯云在基础设施领域已经走出了一条自主创新之路,而随着云计算基础设施的不断进化,这些经过微信、QQ 等海量业务充分验证过的基础能力,正在通过腾讯云共享给更多开发者,助力产业互联网发展。


以星星海服务器来说,在设计过程中,充分结合数据中心实际部署环境要求,针对云端的计算、存储,网络等场景做了重点优化,能够有效满足腾讯云 98%应用场景需求。同时,深度定制的 CPU,能够实现行业最优单核性能和最优单核 TCO;根据测试,星星海可以实现云服务实例综合性能提升 35%以上,最大负载能效对比业界可提高 50%。


在数据中心方面,第四代数据中心 T-block 让用户能够以搭积木的方式,快速实现全数据中心的模块化配置及建设,相比于传统大规模数据中心,T-block 可以显著减少建设周期和施工成本。同时,由于率先在行业内采用更高效率的制冷和供配电架构,系统能源使用效率得到有效提升。以一个拥有 30 万台服务器的园区为例,一年可节省 2.5 亿度电,真正实现绿色数据中心的理念。


类似的自主创新,还体现在计算、存储、数据库等领域。


除了基础设施,大数据在支撑云计算应用上也起着至关重要的作用,腾讯云副总裁蒋杰,数据平台部总经理蒋杰表示:“经过 10 年的积累,腾讯大数据平台的算力资源池目前已有超过 20 万台的规模,每天实时数据计算量超过 30 万亿条,腾讯已经成为中国实时数据计算量最大的公司”。


做到如此庞大的规模,并非一朝一夕之功,从以 Hadoop 为核心的离线计算时代到以 Spark、Storm、Flink 为核心的实时计算时代,再到如今的机器学习和深度学习时代,腾讯从无到有研发了分布式的机器学习引擎 Angel,以及一站式 AI 开发平台智能钛 TI。目前,腾讯正在研究以批流融合、ABC 融合、以及数据湖和联邦学习为方向的下一代大数据平台,该平台将具备混合部署、跨域数据共享和边缘计算等能力。


针对目前技术迭代不断加速,企业建设大数据平台和机器学习平台,成本高昂,缺乏专业人才等问题,腾讯已经把网络、存储、数据库等 IaaS 能力,大数据、机器学习等 PaaS 的能力,以及上层的图像、语音、NLP、BI 等 SaaS 能力,通过腾讯云对外开放。在大数据和 AI 两个领域,腾讯推出了以 TBDS 和智能钛 TI 为首的双引擎,让每个企业和开发者便捷用上领先的大数据和 AI 的能力。

开源、共享、创新,三大理念全面支持开发者发展

开发者是腾讯产业互联网的直接建设者,更是推动社会技术发展的重要力量。腾讯云在开发者生态的构建上,秉持开源、分享、创新三大理念,积极拥抱和推动开源,鼓励开发者互相分享、交流,与开发者一起创新。


目前,腾讯共开源了 86 个项目,覆盖云计算、大数据、AI、安全、小程序等领域,参与贡献的人数超过 1000 名,累计在 GitHub 获得了超过 25 万个 Star。


尤其是大数据领域,从 2014 开始,腾讯将第一代大数据平台的核心,腾讯版的 Hive 进行了开源,2017 年,更是把第三代平台的核心 Angel 开源。今年,腾讯继续加快了开源的脚步, 2 个月前,在 ApacheCon 2019 上,腾讯面向全球开发者正式宣布开源自身核心平台——实时数据采集平台 TubeMQ,并捐献给 Apache 社区。此次在 Techo 大会现场,再次重磅宣布正式开源资源管理平台核心 TKE 和分布式数据库 TBase,随着在大数据开源领域的开源逐步加速,腾讯正在成为中国大数据领域开源最全面的厂商。


在外部开源生态上,腾讯还积极支持 Linux 基金会、Apache 基金会、CNCF 基金会和 OpenStack 等多个国际知名的开源社区,成为中国唯一全面支持四大顶级开源基金会的白金赞助商。并通过不断赞助、捐献项目、为开源项目贡献代码、解决问题等各种形式,积极的参与开源社区生态建设。


此外,腾讯云除了开源和 Techo 开发者大会这样的交流方式之外,还通过线上开发者社区、腾讯云开发者专享扶持活动等构建面向全球开发者的技术对接平台,不断提升腾讯云的整体技术水平和服务能力。未来,腾讯云将以更开放的心态拥抱和回馈社区,为更多的开发者带去便捷、高效的开发体验。


2019-11-11 14:591037

评论

发布
暂无评论
发现更多内容

详解近端策略优化

行者AI

深度强化学习

重磅!博睿数据发布新一代统一告警平台

博睿数据

在线JWT Token解析解码

入门小站

工具

丰e足食将大量引入算法人才 加快无人零售算法研发和应用

江湖老铁

TcaplusDB君 · 行业新闻汇编(五)

数据人er

【web安全】你的open_basedir安全吗?

H

网络安全 WEB安全

外包学生管理系统架构设计

炎彬

「架构实战营」

【TcaplusDB知识库】RESTfulAPI. for List表-[PB] ListDeleteAllRecords介绍

数据人er

TcaplusDB君 · 行业新闻汇编(一)

数据人er

【TcaplusDB知识库】RESTfulAPI. for List表-[PB] [PB] ListBatchDeleteRecords.介绍

数据人er

3月2日,阿里云开源 PolarDB 企业级架构将迎来重磅发布

阿里云数据库开源

数据库 阿里云 开源 分布式 polarDB

通过5个函数带你理解K8s DeltaFIFO

华为云开发者联盟

k8s Queue Client-go DeltaFIFO FIFO

J2PaaS企业级低代码平台,如何支撑开发企业级应用?

J2PaaS低代码平台

低代码 低代码开发 企业级低代码平台 企业级应用

【TcaplusDB知识库】RESTfulAPI. for List表-[PB] ListDeleteAllRecords.介绍

数据人er

TcaplusDB君 · 行业新闻汇编(四)

数据人er

TcaplusDB君 · 行业新闻汇编(三)

数据人er

用实例带你深入理解Java内存模型

华为云开发者联盟

Java JVM JMM 线程安全 Java内存模型

安全专属的移动数字化平台WorkPlus加速国企数字化转型

WorkPlus

前后端分离项目,如何解决跨域问题?

CRMEB

Linux中buff-cache占用过高解决方案

入门小站

Linux

中台和低代码,“零和”还是“竞合”?

WorkPlus

TcaplusDB君 · 行业新闻汇编(二)

数据人er

针对 Kubernetes v1.22,阿里云容器服务 ACK 提供了哪些升级和增强能力?

阿里巴巴云原生

阿里云 容器 云原生 产品升级 ACK

16 张图解带你掌握一致性哈希算法

华为云开发者联盟

负载均衡 分布式系统 一致性哈希 哈希算法 数据迁移

千万级车联网 MQTT 消息平台架构设计|车联网平台搭建从入门到精通 02

EMQ映云科技

架构 车联网 物联网 mqtt 分布式消息流平台

【TcaplusDB知识库】RESTfulAPI. for List表-[PB] [PB] ListDeleteRecord.介绍

数据人er

元年云李彤:ToB产品应具备数据驱动和「宽能力」

ToB行业头条

小熊派:用OpenHarmory3.0点亮LED

华为云开发者联盟

小熊派 OpenHarmony 驱动开发 小熊派Micro LED

聚焦技术和实践,腾讯全面揭秘基础设施和大数据演进之路_云计算_云加社区_InfoQ精选文章