写点什么

在线课堂 Q/A 实录:AWS 存储服务特点与典型应用场景

  • 2014-11-30
  • 本文字数:1966 字

    阅读完需:约 6 分钟

存储是应用架构设计中非常关键的一环。不同的应用,对于存储的并发访问量、响应时间、数据持久性保护、高可用、访问接口以及成本等都有不同的需求。在 11 月 18 日的 InfoQ 在线课堂《AWS 存储服务特点与典型应用场景》上,亚马逊 AWS 资深技术讲师张波从互联网时代应用程序对数据存储的多种需求出发,全面介绍了 AWS 云平台所提供的多种数据存储服务,其中包括完全基于非结构化数据存储的简单存储服务 S3,侧重于磁盘性能的弹性块存储(EBS),传统的关系型数据库服务,NoSQL 数据库 DynamoDB 以及缓存集群服务等。他还结合客户案例说明了这些服务的实际应用场景。

在课程最后,张波回答了听众的问题,现将主要问题归纳整理如下:

问:Region 在不同地区使用的费用和价格是否一样?EC2 支持哪些操作系统?

答:不同地区的 Region,价格可能是不一样的,所以大家可以比较一下。我们在选择 Region 的时候,可能是基于成本的原因,也可能是基于性能的原因,也可能是基于功能的原因,因为不同的 Region 服务的种类可能不一样,更重要的可能是法律法规的原因。

EC2 其实就是一个虚拟主机,大家是有完全的控制权限的。目前主流的 Linux 系统和 Windows,它都支持。

问:我们希望数据上传到 S3 之后可以在很短的时间内在 CloudFront 的各个节点上更新,请问如何做到?

答:这个问题其实是两个问题。首先是 CloudFront 的更新机制是什么?CloudFront 在做内容分发的时候,它的回源机制不是主动的,只有当用户访问到它的数据的时候,它才会回源获取最新的数据。但如果是已经有一份数据,需要对它进行修改,修改了之后看它有没有更新到 CloudFront 的节点上,那么我们可以设置相应的 TTL。所以,这个问题可以从两个方面来回答:

如果是新数据,上传到 S3 之后,那么可以在各个 Region 里对数据源进行访问,主动访问会使内容更新到 CloudFront 的边缘节点上。目前,我们在全球有 50 多个边缘节点。

如果是对现有的数据进行了修改,修改之后希望在 CloudFront 的各个节点上更新的话,我们会有两个建议:第一个,可以把 TTL 设的短一点;第二个,可以手动访问相应的内容。

问:CloudFront 不能主动推送到边缘节点吗?是不是可以设不同文件推送的优先级?

答:不能。CloudFront 的内容到边缘节点采用的是 put 的方式,而不是 push 的方式,所以比较方便的方法就是在不同的地区主动地访问这些文件。访问一次后,这些文件就在边缘节点和 CloudFront 里面作了缓存了。

问:EC2 坏掉之后启动一个新的实例,原有的 IP 会变动吗?

答:这是一个很好的问题,但可能跟今天我们谈论的存储相关性不是很大。如果一个 EC2 的实例是自动获取的一个 Public IP 地址的话,那么重启之后原来的 IP 地址就变了,它会重新分配一个公有的 IP 地址。但是在 IP 地址里面有一个选项叫 EIP(Elastic IP ),这是一个静态的公网 IP 地址,大家可以自己预留一个这样的公网 IP 地址。EC2 坏掉之后,可以通过脚本自动把这个 IP 挂载到新启动的 EC2 实例上,非常方便的实现一个低成本、高可用的方案。

问:S3 怎样支持 gzip 这种数据传输中的压缩?

答:实际上,我们在使用 S3 的时候是可以指定一些压缩格式的,大家可以参考我们的开发手册,其中有专门的 S3 开发文档。

问:AWS 有私有云的产品吗?

答:从亚马逊 AWS 来讲,我们不会谈公有云或私有云这样的概念。我们做的事情就是在 AWS 的云上为大家提供服务。所以,我们不会提供一个什么的方案,帮大家在自己的数据中心里搭建出一个云。我们认为,这样的云其实称不上是云。因为从云的角度来说,它首先要有一个非常大的规模。

问:现在中国内陆的 AWS Region 和其它 Region 有什么差别?

答:首先,价格方面会有差别。另外,国内的服务种类也会有稍微不一样的地方。但只要是提供了的服务,它的服务水平同全球的 Region 都是一样的。

问:CloudFront 缓存的时长和保留机制是什么?

答:我们可以通过设置 TTL 这样一个参数来进行保留时长的设置。

问:多个 EBS 卷条带化时,要在客户一边增加程序吗?

答:相对来说,这个比较简单,因为操作系统层面上有很多工具可以帮助大家做这样的事情,所以其实并不是增加一个应用程序。比如,在 Linux 上有 LVM,在 Windows 上也有相应的逻辑卷管理工具。我们可以通过这些工具很方便地实现多个 EBS 卷的条带化。

问:如果 EC2 先前挂的 EBS 存储空间不够大,我想扩充空间怎么办?

答:有一个很简单的方法,我们可以很快捷地给一个 EBS 卷做一个快照。然后,可以从快照生成另外一个 EBS 卷,在生成 EBS 卷的时候可以指定它的容量,这个值可以比原来大很多。通过这个方法,我们可以创建一个更大的 EBS 卷,同时数据已经在上面了。最后把它挂载到之前的 EC2 实例上就可以了。

问:EBS 是否可以在线扩展?

答:不可以。

问:北京 Region 提供 Direct Connect 服务吗?

答:目前没有,但是很快会有,所以请大家保持期待。

2014-11-30 07:532174
用户头像

发布了 1008 篇内容, 共 432.5 次阅读, 收获喜欢 346 次。

关注

评论

发布
暂无评论
发现更多内容

对话 SphereEx 创始人张亮:开源与商业并行 做时间越久越有价值的事情

SphereEx

实战领域驱动设计开篇

worry

领域驱动设计 DDD 领域驱动 Domain Driven Design

抓到Netty一个Bug,顺带来透彻地聊一下Netty是如何高效接收网络连接的

bin的技术小屋

网络编程 中间件 netty 死磕 NIO Java【

像搭积木一样定制系统,这家公司正瞄准数据库做增值服务

SphereEx

IAST 最佳实践 | 利用洞态做开源组件的安全治理

火线安全

Linux系统编程-(pthread)线程创建与使用

DS小龙哥

线程 2月月更

资讯|WebRTC M97 更新

网易云信

WebRTC

百度AICA再添57位“首席AI架构师”,人工智能与产业场景结合愈发深入

百度开发者中心

飞桨 百度AI

加入科学计算SIG,挑战最前沿的AI+Science研发与创新

百度开发者中心

百度AI

全球案例 | 一家有着百年历史的航空公司如何扩展和转型,推动航空业创新

龙智—DevSecOps解决方案

Atlassian Jira 航空公司

DevOps进阶(一):DevOps 软件开发工艺解读

No Silver Bullet

DevOps 2月月更

GIF 格式解析之表情包是如何动起来的

CRMEB

Linux系统编程-(pthread)线程通信(互斥锁)

DS小龙哥

互斥锁 2月月更

如何将Perforce Helix Core与CI构建服务器结合使用

龙智—DevSecOps解决方案

ci 持续集成 持续交付 CD

会声会影如何制作视频影片-影片制作过程三步骤

懒得勤快

某 E-Office v9 任意文件上传【漏洞复现实战】

H

网络安全 漏洞

AMD EPYC服务器芯片将涨价10%~30%

BeeWorks

Linux系统编程-(pthread)线程通信(读写锁)

DS小龙哥

2月月更

成为第一没有捷径:AI新势力MindSpore成长秘籍 | 源创者说 专访胡晓曼

科技热闻

从小样本学习出发,奔向星辰大海

百度开发者中心

百度云 百度 飞桨

百度智能云开物再收“一个奖状”

百度开发者中心

工业互联网 百度智能云 百度智能云开物

AI+Science:基于飞桨的AlphaFold2,带你入门蛋白质结构预测

百度开发者中心

百度AI

浅谈AI机器学习及实践总结 | 社区征文

张浩_house

机器学习 数据工程 机器学习算法 新春征文

网络安全kali渗透学习 web渗透入门 如何进行基于ping命令的探测

学神来啦

Linux系统-Makefile规则介绍、基本使用

DS小龙哥

Linux makefile 2月月更

Linux系统编程-(pthread)线程通信(围栏机制)

DS小龙哥

2月月更 围栏机制

2021 年软件安全报告:代码开源,福“祸”相依?

腾源会

开源 安全

误删D盘数据怎么办?推荐使用数据恢复软件EasyRecovery

淋雨

数据恢复 EasyRecovery

一手实录!朱广权的AI手语搭档是怎样“养成”的?

百度开发者中心

百度智能云 百度AI

Linux系统编程-(pthread)线程通信(条件变量)

DS小龙哥

2月月更

浪潮云说丨上云迁移实践

云计算,

在线课堂Q/A实录:AWS存储服务特点与典型应用场景_亚马逊云科技_谢丽_InfoQ精选文章