【AICon】探索RAG 技术在实际应用中遇到的挑战及应对策略!AICon精华内容已上线73%>>> 了解详情
写点什么

“数据驱动生活,算法统治世界”——QCon 北京 2014 专题出品人吴甘沙专访

  • 2014-02-10
  • 本文字数:1930 字

    阅读完需:约 6 分钟

大数据可以被分为收集、组织、存储、检索、可视化以及数据分析,其核心是从数据中挖掘出价值。正如 Google 首席经济学家 Hal Varian 所说,数据是广泛可用的,所缺乏的是从中提取出知识的能力。数据收集的根本目的是根据需求从数据中提取有用的知识,并将其应用到具体的领域之中,而不同领域的大数据应用有不同的特点。

本届QCon 北京2014 ,InfoQ 特别邀请到英特尔中国研究院首席工程师吴甘沙来打造“数据驱动生活,算法统治世界”专题,解读数据与算法与普通人生活的关系。

吴甘沙主要研究方向包括大数据的计算范式和架构,软硬件协同设计,数据安全和权利,以及数据作为服务的应用模式和支撑环境。曾经参与和主持移动受控运行时(Managed Runtime)和并行编程等研究项目。发表学术论文10 余篇,获得美国专利23 项和国际专利10 余项,另有17 项专利待审中。

以下是采访内容。

InfoQ:吴甘沙你好,大家都知道你是 Intel 中国研究院的首席工程师,在大数据、Spark、嵌入式开发有许多研究,Intel 中国研究院培养了许多出色的工程师,在智能交通、传感器等方面做了许多工作。能否再请你介绍一下自己以及 Intel 中国研究院。

吴甘沙:我的经历很简单,离开大学后就一直在英特尔中国研究院。前五年做 Java 虚拟机,从服务器上一直做到手机上;中间四年做并行计算,从多核做到众核;最近四、五年转到分布式计算,先是物联网,现在专注于大数据。

英特尔中国研究院有不少有趣的、有影响力的研究,请大家关注英特尔的爱迪生,这项在 CES 上获得最佳创新大奖殊荣的技术就是来自中国研究院。另一个值得关注的技术是基于 X86 的云基站,它有可能在根本上改变未来的无线通信基础设施。

InfoQ:你曾经说过,无论做任何事,只要你认真对待,即使是走弯路,同样也能获得另一种成功。这让我想到了另外一句话:屡战屡败,屡败屡战,但每次失败都比上一次更美好。

吴甘沙:对我来说,学会欣赏失败的美好还需提高素养:)。从失败中成功,仍然是小概率事件,要放大这个概率需要两方面相辅相成:一是我们自身要有小强精神,学会失败并快乐着;二是环境要容忍和鼓励失败,英特尔研究院专门有一个奖项来奖励“有价值的失败”。

InfoQ:目前你关注的重点是什么?

吴甘沙:大数据如何产生价值。具体来说,兴趣从分布式基础设施、数据管理转到数据分析、可视化和用户工具;关注如何做到隐私无虞的数据开放,如何用数据安全技术和经济激励机制鼓励数据交换和共享。

InfoQ:过去一年中,你观察到大数据领域有哪些值得关注变化?

吴甘沙:国外更多地开始关注大数据栈的上层,关注行业应用和服务;国内在行业上走得更早,但发现技术没有跟上,现在也开始夯实大数据栈的下层,已经有专业的公司提供大数据基础产品和解决方案。Hadoop 还是主流,但 Spark 的早期接受者已经星火燎原。

在应用模式上,也慢慢从简单的查询和 NoSQL 取代 SQL,转为数据挖掘和非结构化数据分析。传统行业,如金融、健康医疗和教育,对大数据技术的需求井喷。但总体来讲,除商业外,做得很深、很透的大数据行业解决方案还不多,这是未来一两年值得期待的。另外,对数据隐私、安全、定价和交换 / 交易的关注显著升温。

InfoQ:你是 QCon 北京 2014 大会“数据驱动生活,算法统治世界”专题的出品人,能否谈谈你对此次专题的策划?

吴甘沙:我把主题定为“数据驱动生活,算法统治世界”。我们生活中很多的决策,如我们对什么产生了兴趣,发生了怎样的购买行为,都可能是数据驱动的。另一方面,从股市的运行到交通的控制,算法又在悄悄地指挥这个世界的运行。所以我们嘉宾的演讲题目必须是贴近我们生活的,同时嘉宾们又会用技术流的方式说明白这些应用下面大数据计算和分析的工作机制。

InfoQ:你怎么理解大数据处理与大数据应用?

吴甘沙:就是挖矿工具和挖矿的关系。挖矿工具要好用、耐用,而挖不同的矿则要靠经验加上工具的熟练使用。

InfoQ:Spark Summit 2013 上有许多非常棒的研究实践,包括 Spark、Spark Streaming 在内这样的高生产率工具出现后,帮助垂直领域专家发挥了创造力,这是否意味着未来几年大数据领域将迎来创新的高潮?出现通过大数据真正改变人们生活的公司和产品?

吴甘沙:我很相信这一点。Spark 以及 BDAS(Berkeley Data Analytics Stack)就是好用的挖矿工具,今年达到商用,明年全面铺开。那挖矿的人还等什么呢?这将是又一次淘金潮(Gold Rush)。

此专题详细信息,请见专题页面。关于此次 QCon 北京其他专题的详细信息,请移步至大会官网

需要特别注明的是,每年 QCon 大会门票都会在开幕前售罄,及早预定可提前确保席位,并享受更低折扣。现在报名参加将可享受 8 折优惠。团体购票(5 人及以上)将享有更多优惠。详请咨询 qcon【at】cn.infoq.com,或直接致电 010-64738142。报名请点击报名页面

公众号推荐:

2024 年 1 月,InfoQ 研究中心重磅发布《大语言模型综合能力测评报告 2024》,揭示了 10 个大模型在语义理解、文学创作、知识问答等领域的卓越表现。ChatGPT-4、文心一言等领先模型在编程、逻辑推理等方面展现出惊人的进步,预示着大模型将在 2024 年迎来更广泛的应用和创新。关注公众号「AI 前线」,回复「大模型报告」免费获取电子版研究报告。

AI 前线公众号
2014-02-10 07:111867
用户头像

发布了 45 篇内容, 共 13.6 次阅读, 收获喜欢 3 次。

关注

评论

发布
暂无评论
发现更多内容

Webpack最佳实践

Geek_02d948

webpack

大数据时代,数据仓库究竟是干嘛的?

JAVA旭阳

Java 大数据

Webpack构建速度优化

Geek_02d948

webpack

细说nodejs的path模块

coder2028

node.js

细说js变量、作用域和垃圾回收

hellocoder2029

JavaScript

为什么我们家里的IP都是192.168开头的?

小小怪下士

Java 后端 IP

JS知识点梳理之作用域、作用域链、柯里化、闭包

hellocoder2029

JavaScript

这88道阿里高级岗面试题,刷掉了80%以上的Java程序员

钟奕礼

Java java程序员 java面试 java 编程

4000道Java面试真题合集,助你搞定面试官

钟奕礼

Java 程序员 java编程

【敏捷研发系列】前端DevOps流水线实践

京东科技开发者

敏捷 前端 软件开发 运维‘ #DevOps

Webpack配置实战

Geek_02d948

webpack

细说Js中的this

hellocoder2029

JavaScript

裁员名额谁来背?优秀985硕士无故被裁,劣币驱逐良币错在谁?

Java永远的神

程序员 面试 程序人生 后端 架构师

ChatGPT完全火出圈了,你注册了吗?

Java全栈架构师

人工智能 程序员 AI 程序人生 ChatGPT

【秒杀购物商城业务服务】「分布式架构服务」盘点中间件服务的高可用模式及集群技术的方案分析

洛神灬殇

redis高可用 MySQL 高可用 集群 12 月 PK 榜

金九银十喜提offer!秋招蚂蚁金服Java研发岗四面

钟奕礼

Java 程序员 java面试 java编程

GitHub上标星65k+超火的《Java大厂面试》,分享整理的PDF版本

钟奕礼

Java 程序员 java面试 java编程

FL Studio2024最新绿色版水果萝卜编曲软件

茶色酒

FL Studio FL Studio21 FL Studio2024

传统大型国企云原生转型,如何解决弹性、运维和团队协同等问题?

Serverless Devs

2023年值得采购的堡垒机当属行云管家堡垒机!

行云管家

网络安全 等保 堡垒机

程序员最关心的问题,我都帮你们问AI了

大白给小白讲故事

AI写代码

CleanMyMac2024MACOS老牌清理软件

茶色酒

CleanMyMac CleanMyMac2024

阿里Java三面凉凉:微服务,Redis,JVM一个都搞不懂

钟奕礼

Java 程序员 java面试 java编程

linux高可用集群软件采购哪款好?主要功能有哪些?

行云管家

Linux 高可用

自定义函数实现IoT数据编解码、格式处理与业务告警

EMQ映云科技

物联网 IoT 自定义函数 12 月 PK 榜 增值服务

Databend 索引结构说明

Databend

可观测性之Micrometer Tracing

宋小生

全链路监控 可观测性 链路追踪 micrometer 全链路

Elasticsearch Head插件使用小结

京东科技开发者

elasticsearch 索引 chorme 数据库· 数据查询

鸿蒙开发实例 | 为什么选择HarmonyOS?

TiAmo

华为 鸿蒙 华为云 12月月更

说说Nodejs高并发的原理

coder2028

node.js

OpenHarmony社区运营报告(2022年11月)

OpenHarmony开发者

OpenHarmony

“数据驱动生活,算法统治世界”——QCon北京2014专题出品人吴甘沙专访_QCon_包研_InfoQ精选文章