QCon 演讲火热征集中,快来分享技术实践与洞见!222222 了解详情
写点什么

Google BigQuery 发展势头良好

  • 2014-02-17
  • 本文字数:779 字

    阅读完需:约 3 分钟

BigQuery 是 Google 推出的一款 SaaS 查询产品,其发展势头似乎越来越好。它允许查询云中的大型柱状数据结构。开发人员可以通过上传到 Google 云存储(相当于 Amazon 的 S3)或者以流数据的方式把数据加载到 BigQuery 中,然后使用类似 SQL 的查询语言执行 OLAP 风格的查询。

现在,越来越多的从业者分享了他们的 BigQuery 实践经验。例如,Shine Technologies 的 Graham Polley 在报告中写道:

我们决定自己进行测试,使用一个 15 亿行的数据集向 BQ 发起挑战。事情即将变得非常有趣——BigQuery 真能像 Google 的宣传口号所说的那样“能够对数十亿行的大规模数据集进行交互式分析”吗?印象深刻,它能。确切地说,印象非常深刻。即使不使用缓存结果(缓存结果可以开启和关闭),使用相对复杂的查询在一个 15 亿行的大规模数据集中汇总数据,在 20 到 25 秒的时间里,我们就能获得一致的结果。

BigQuery 可以单独使用,也提供与其它服务的集成,如 Google Apps 脚本或 Google 分析。关于后者,Jonathan Weber(来自 LunaMetrics 的数据传教士)写过一篇内容丰富的文章,其中他写道:

首先,BigQuery 导出功能只对 Google 分析付费版客户可用。他们可以通过付费版账户管理器启用 BigQuery 导出功能。请注意,在 BigQuery 中,数据存储和处理都是收费的,但 Google 分析付费版用户可以使用每月 500 美元的信用额度来支付那些费用。在许多情况下,那 500 美元都会发挥很大作用。作为参考,我看了我们其中一位使用 BigQuery 的付费版客户。他们的网站每月大约有 600 万的访问量和 5000 万的综合浏览量。数据从九月份开始导出,本月他们的数据存储费用大约为 12.86 美元。

虽然 BigQuery 只是一个基于云的解决方案,但支撑 BigQuery( Dremel )的底层技术是许多像 Apache Drill 或 Impala 那样的开源SQL-in-Hadoop 解决方案的核心。

查看英文原文:**** Google’s BigQuery Gaining Momentum

2014-02-17 07:232898
用户头像

发布了 256 篇内容, 共 88.5 次阅读, 收获喜欢 12 次。

关注

评论

发布
暂无评论
发现更多内容

Linux学习方法《Linux一学就会》Centos8软件包的管理与安装

侠盗安全

Linux linux运维 运维工程师 云计算架构师

阿里云 Serverless 助力企业全面拥抱云原生

阿里巴巴云原生

阿里云 Serverless 云原生 企业

Python量化数据仓库搭建系列2:Python操作数据库

恒生LIGHT云社区

Python 量化

测试不趁早,“持续测试”搞不好

飞算JavaAI开发助手

DevOps 敏捷开发 自动化测试

架构实战营模块五作业

孙志强

架构实战营

如何在P4中管理Unreal Engine 代码

龙智—DevSecOps解决方案

版本控制 游戏开发 版本管理 游戏引擎 虚幻引擎

前端开发之JavaScript优化

@零度

JavaScript 大前端

大批量更新数据mysql批量更新的四种方法

大数据技术指南

11月日更

应对 Job 场景,Serverless 如何帮助企业便捷上云

阿里巴巴云原生

阿里云 Serverless 云原生 函数 Job

云原生体系下 Serverless 弹性探索与实践

阿里巴巴云原生

阿里云 Serverless 云原生 弹性 SAE

Perforce用户文章转载:每个游戏从业者都应该学学P4

龙智—DevSecOps解决方案

版本控制 游戏开发 版本管理 perforce 游戏厂商

并发编程中,你加的锁未必安全

华为云开发者联盟

线程 高并发 并发 线程安全

dart系列之:时间你慢点走,我要在dart中抓住你

程序那些事

flutter 架构 dart 程序那些事 11月日更

数仓开发详细剖析

五分钟学大数据

11月日更

服务API版本控制设计与实践

vivo互联网技术

API 服务器端开发 客户端开发 迭代

PackML从会到不会——状态机(1)

陈的错题集

标准化 PackML

百度商业大规模高性能全息日志检索技术揭秘

百度Geek说

软件架构

1 分钟 Serverless 极速抽盲盒,自己部署自己抽!

阿里巴巴云原生

阿里云 Serverless 云原生

16张图解锁Spring的整体脉络

4ye

Java spring 程序员 后端 签约计划第二季

大厂算法面试之leetcode精讲10.递归&分治

全栈潇晨

LeetCode 算法面试

react源码解析3.react源码架构

buchila11

源码 React React Hooks react源码

Elasticsearch云生态下的开源共生之路

大咖说

云计算 elasticsearch 开源

直播预告|数以智用——大数据应用探索与实践

智联卓聘

大数据 数据管理 线上沙龙

大厂算法面试之leetcode精讲9.位运算

全栈潇晨

算法 LeetCode

react源码解析4.源码目录结构和调试

buchila11

React React Hooks

爱奇艺TFServing负载均衡问题研究及改进实践

爱奇艺技术产品团队

如何使用 Java 代码给图片增加倒影效果

汪子熙

Java API 图片处理 11月日更 Java图片

KubeMeet 深圳站回顾:应对云原生边缘计算落地挑战

阿里巴巴云原生

阿里云 Kubernetes 云原生 线下活动

内存数据库的分布式架构提升之道

鲸品堂

数据库

移动计算云分布式数据缓存服务,实现快速可靠的跨区域多活复制

华为云开发者联盟

可用性 云数据缓存 跨区域多活 无冲突复制数据类型CRDT

java开发之DOS命令学习及运行环境配置安装

@零度

java开发学习 DOS命令学习

Google BigQuery发展势头良好_语言 & 开发_Michael Hausenblas_InfoQ精选文章