【AICon】AI 基础设施、LLM运维、大模型训练与推理,一场会议,全方位涵盖! >>> 了解详情
写点什么

Amazon Elastic File System (EFS) 预置吞吐量

  • 2019-10-21
  • 本文字数:1496 字

    阅读完需:约 5 分钟

Amazon Elastic File System (EFS) 预置吞吐量

Amazon Elastic File System 允许您创建 PB 级的文件系统,这种文件系统可以从成百上千个 Amazon Elastic Compute Cloud (EC2) 服务器和本地资源大规模并行访问,按需扩展且不会发生应用程序中断的问题。在这种强大功能的背后,是跨多个可用区和冗余存储服务器分布式存储,从而为您提供具有可扩展性、持久性和高可用性的文件系统。按需分配空间和收费,从而让您可以根据需求使用资源,同时确保成本与实际使用量相符。应用程序可以实现极高的总吞吐量和 IOPS,同时保持稳定的低延迟。我们的客户利用可以直接将现有基于文件的应用程序和工作流迁移到云的能力优势,将 EFS 用于广泛的使用案例,包括媒体处理工作流、大数据与分析作业、代码存储库、解析树和内容管理存储库等。

快速了解


您可以已经知道,EFS 为您在创建文件系统时提供了两种性能模式选择:


通用 — 这是默认的模式,也是您应当首先开始使用的模式。它非常适合对延迟敏感的使用案例,最高支持每个文件系统每秒 7000 次运算。


最大 I/O – 这种模式可扩展至更高的总吞吐量和性能水平,但延迟略高。它本身不存在每秒运算次数限制。


不论采用哪种模式,吞吐量都会根据文件系统的大小进行扩展,此外还可以根据需要突增至更高的水平。文件系统的大小决定了突增大小和持续时间的上限。例如:


1 TiB – 1 TiB 的文件系统可以达到每秒 50 MiB 的持续传输速率,并且每天可以突增至每秒 100 MiB 的速率 12 小时。


10 TiB – 10 TiB 的文件系统可以达到每秒 500 MiB 的持续传输速率,并且每天可以突增至每秒 1 GiB 的速率 12 小时。


EFS 使用一种积分系统,从而让您可以在低谷时段“储蓄”吞吐量,然后在高峰时段使用储蓄的吞吐量。有关积分系统和两种性能模式的更多信息,请参阅 Amazon EFS 性能

新预置吞吐量

从高吞吐量到不占用整片空间的文件集,可以让许多使用案例受益,例如 Web 服务器内容农场、解析树和 EDA 模拟等。为满足这种使用模式的需求,您现在可以选择为您的每个 EFS 文件系统预置期望的吞吐量水平(最高每秒 1 GiB)。您可以在创建文件系统时设置一个初始值,然后在需要时任意增加。您还可以每隔 24 小时将它下调,以及在同一循环的预置吞吐量和突增吞吐量之间切换。例如,您可以将一个 EFS 文件系统配置为向您的 Web 服务器提供每秒 50 MiB 的吞吐量,即使卷包含的内容量相对较小。


如果应用程序的吞吐量要求超过默认(突增)模式的能力,则预置模式将是您的绝佳选择!您可以在创建系统后立即达到期望的吞吐量水平,不论您使用的存储有多高或多低。


下面来看我如何进行设置:



使用预置吞吐量,意味着我需要为存储(以 GiB/月为单位)和预置吞吐量(以 MiB/秒-月为单位)分别付费。


我可以使用 CloudWatch 指标数学表达式来监控平均吞吐量。Amazon EFS 监控教程包含了所有的公式,此外我还可以使用 CloudFormation 模板在几分钟内建立完整的 CloudWatch 控制面板:



我选择需要的模板,输入我的 EFS 文件系统 ID,然后点击剩下的屏幕以创建控制面板:



模板会创建一个 IAM 角色、一个 Lambda 函数、一个 CloudWatch Events 规则以及控制面板:



控制面板可在 CloudWatch 控制台访问:



下面就是我的测试文件系统的控制面板:



如需进一步了解如何使用最适合您的应用程序的 EFS 性能模式,请参阅 Amazon Elastic File System – 选择不同的吞吐量和性能模式

现已推出

此功能现已推出,您可以立即在提供 EFS 的所有 AWS 区域开始使用此功能。


作者介绍:


Jeff Barr


AWS 首席布道师; 2004 年开始发布博客,此后便笔耕不辍。


本文转载自 AWS 技术博客。


原文链接:


https://amazonaws-china.com/cn/blogs/china/new-provisioned-throughput-for-amazon-elastic-file-system-efs/


2019-10-21 08:00579

评论

发布
暂无评论
发现更多内容

区块链IM即时社交通讯系统开发,区块链社交平台源码搭建

13530558032

微服务通信之feign的配置隔离

编程 微服务 计算机

奋力准备一个月成功进字节,来看一下我都看了哪些资料做了哪些准备

小Q

学习 编程 程序员 架构 面试

这4个Java异常框架,很多人竟然还不知道

比伯

Java 编程 架构 面试 计算机

7面阿里,最后一面居然挂在了JVM上面!狠下决心恶补JVM知识

Java架构之路

Java 程序员 架构 面试 编程语言

为什么有的专科程序员比本科程序员薪资高?他们之间有多大的区别?

Java架构师迁哥

懵了!一口气问了我18个JVM问题!

yes

面试 JVM

Android热修复之DexPatch介绍

阿里云金融线TAM SRE专家服务团队

android

高承实:区块链的工业革命带来了什么?

CECBC

区块链 分布式

国网浙江建设公司推进“信用基建+区块链”建设

CECBC

区块链 国网 基建

区块链币支付系统开发搭建,USDT支付平台源码

13530558032

适用初学者的5种Python数据输入技术

华为云开发者联盟

Python 数据 函数

爆火的低代码,到底是真需求还是伪风口?

ToB行业头条

低代码

nginx 平滑升级、以及导入第三方模块

sinsy

nginx 升级

在Codurance是如何面试技术人员的

sherlockq

面试 TDD

读谱对吉他手来说重要吗?试试它提升你的读谱效率

奈奈的杂社

学习 编曲 打谱

vscode + vim : vscode 全键盘使用方案

lmymirror

vim vscode Spacemacs

来不及解释了,快上车!LR.NET开发平台助力企业信息互联

雯雯写代码

《深入理解java虚拟机》- java内存区域

never say never

JVM笔记 堆内存

架构师训练营 -week09-作业

大刘忙

极客大学架构师训练营

数字货币引发的金融变革

CECBC

数字化时代

区块链交易所软件,数字货币场外交易系统搭建

13530558032

C++调用Go方法的字符串传递问题及解决方案

华为云开发者联盟

c++ 内存 代码

阿里P8大牛整理的300页图解网络知识+计算机底层操作系统

Java架构之路

Java 编程 程序员 架构 面试

Java读取Excel/CSV格式的科学计数法问题

团子粑粑

Java Excel csv

学习笔记:架构师训练营-第八周

四夕晖

架构师训练营 -week09-总结

大刘忙

极客大学架构师训练营

史上最通俗Netty入门长文:基本介绍、环境搭建、动手实战

JackJiang

网络编程 Netty nio 即时通讯 IM

K3d vs Kind 谁更适合本地研发

郭旭东

Kubernetes k3s kind

深圳区块链钱包系统开发,区块链钱包app源码

13530558032

备战2021年金三银四,阿里P8面试官梳理的2020年999道大厂高频Java面试题(附答案)

Java架构之路

Java 编程 程序员 架构 面试

Amazon Elastic File System (EFS) 预置吞吐量_语言 & 开发_亚马逊云科技 (Amazon Web Services)_InfoQ精选文章