NVIDIA 初创加速计划,免费加速您的创业启动 了解详情
写点什么

AWS Storage Gateway 概述,SMB 支持、RefreshCache 事件及更多内容

  • 2019-10-22
  • 本文字数:1586 字

    阅读完需:约 5 分钟

AWS Storage Gateway 概述,SMB 支持、RefreshCache 事件及更多内容

借用我自己以前说过的话AWS Storage Gateway 是一项包含多协议存储设备的服务,适合用于您的现有应用程序与 AWS 云之间。根据配置方式的不同,您的应用程序会将网关视为文件系统、本地磁盘卷或虚拟磁带库。


今天,我想分享一些有关 Storage Gateway 的文件网关配置的新近更新,还会展示一下如何将其结合使用,以支持某些新的处理模型。首先,我们来看一下最新更新:


SMB 支持 – 文件网关已支持通过使用 NFS(支持版本 3 和 4.1)的客户端进行访问。上个月,我们添加了对服务器信息块 (SMB) 协议的支持。这允许使用 SMB v2 或 v3 进行通信的 Windows 应用程序通过网关将文件作为对象存储在 S3 中,从而实现混合云使用案例,例如备份、内容分发以及机器学习和大数据工作负载的处理。您可以使用现有的本地 Active Directory (AD) 域或 AWS Directory Service 中托管的基于云的域来控制对网关的访问,也可以使用经过身份验证的访客访问。要了解更多有关此次更新的信息,请参阅 AWS Storage Gateway 添加 SMB 支持以在 Amazon S3 存储桶中存储和访问对象


跨账户权限 – 部分客户在一个 AWS 账户中运行网关,并将其配置为上传到另一个账户拥有的 S3 存储桶。这允许他们使用实际扣款和名义扣款模型跟踪部门存储和检索成本。为了简化此重要使用案例,您可以配置网关,以便为存储桶拥有者提供完整权限。这可以避免存储桶拥有者无法查看对象时出现的难题。要了解具体设置方法,请参阅使用文件共享进行跨账户访问


申请方付款 – 存储桶拥有者负责存储成本。默认情况下由拥有者支付数据传输费用,但也可以选择由申请方付款。为了支持此使用案例,文件网关现支持 S3 的申请方付款存储桶。数据收集者和聚合者可以使用此功能,与大学和实验室等研究组织共享数据,而不会产生访问成本。文件网关提供对 S3 对象的基于文件的访问权限,在本地缓存最近访问的数据,从而帮助申请方降低延迟和成本。要了解更多信息,请参阅创建 NFS 文件共享创建 SMB 文件共享


文件上传通知 – 网关在本地缓存文件,并在后台将其上传到指定的 S3 存储桶。去年年底,我们为您提供了请求在上传新文件时接收通知(以 CloudWatch 事件的形式)的功能。您可以利用此功能,启动基于云的处理,或者实施高级日志记录。要了解更多信息,请参阅收到文件上传通知,并研究 NotifyWhenUploaded 函数。


缓存刷新事件 – 您很早之前就已可使用 RefreshCache 函数来确保网关关注存储桶中的对象添加、删除或替换。新的 Storage Gateway 缓存刷新事件可让您了解缓存现与 S3 保持同步,并可用作启动本地处理的信号。要了解更多信息,请参阅获取刷新缓存通知


使用文件网关的混合处理


您可以使用文件上传通知和缓存刷新来自动执行一些例行混合处理任务!


假设您经营着一家分散在多个地理位置的办公企业或零售企业,经营网点遍布全球各地。您在每个位置收集原始数据(指标、收银机收据或时间表),然后使用托管在各位置的文件网关将这些数据上传到 S3。在收到数据时,您使用文件上传通知处理各 S3 对象,或许会利用一个 AWS Lambda 函数,调用 Amazon Athena 对各对象运行一组查询。数据集中在几个小时的时间段内送达,结果造成大量数据聚集在另一个存储桶内。在报告期结束时,中间结果将得到处理,系统会为每个分支位置生成自定义报告,然后将其存储在另一个存储桶中(事实证明,这个存储桶也与网关相关联,并且每个网关都拥有先前版本报告的缓存副本)。生成报告后,您可以刷新各网关缓存,等待相应的通知,然后向分支经理发送电子邮件,告知他们新报告已经可用。


有关此处理模型的更多信息,请观看以下视频(及演示文稿):



现已推出


上述所有功能均已推出,从现在起,即可在提供 Storage Gateway 的所有区域使用。


本文转载自 AWS 技术博客。


原文链接:


https://amazonaws-china.com/cn/blogs/china/aws-storage-gateway-recap-smb-support-refreshcache-event-and-more/


2019-10-22 08:00796

评论

发布
暂无评论
发现更多内容

易观分析苏筱芮:数字科技创新场景应用为王,驱动金融与实体经济同频发展

易观分析

金融

不愧是阿里资深架构师,这本“分布式架构笔记”写得如此透彻明了

钟奕礼

Java 程序员 java面试 java编程

Alibaba官方「SpringCloudAlibaba全彩学习手册」限时开源!

架构师之道

Java 架构 面试 spring cloud stream

Hadoop如何保证自己的江湖地位?Yarn功不可没

JAVA旭阳

Java 大数据

元宇宙之数字孪生 孪数科技-企业元宇宙引领者

Jerry Tan

别研究 ChatGPT 了,来看个国产好项目!

Java永远的神

程序员 程序人生 后端 架构师 开源项目

深入理解RBAC

俞凡

架构 网络安全 rbac

在 Ubuntu 上安装 Discourse 开发环境

HoneyMoose

聊聊最适合程序员的一些画图工具?

程序员小毕

程序员 程序人生 后端 架构师 画图工具

【Java难点攻克】「NIO和内存映射性能提升系列」彻底透析NIO底层的内存映射机制原理与Direct Memory的关系

洛神灬殇

内存映射 用户态 内核态 12 月 PK 榜 直接内存

TechSmith Camtasia Studio2023免费的屏幕录像视频编辑软件

茶色酒

Camtasia Studio2023

作者推荐 | 【分布式技术专题】「架构设计方案」图解学习法总结集群模式下的各种软负载均衡策略实现及原理分析

洛神灬殇

分布式架构 负载均衡算法 12月日更 12 月 PK 榜

【工具使用】eclipse来回切换项目的JDK版本的方法(最全的)

No8g攻城狮

eclipse jdk jdk8 JDK7

易观分析《中国智能客服供应商实力矩阵2023》研究报告正式启动

易观分析

智能客服 易观分析

GBase 8s 之数据存储空间划分

@下一站

数据库优化 国产数据库 12月日更 12月月更

MacBook免费的电脑管家CleanMyMac2023

茶色酒

CleanMyMac CleanMyMac X

发布!第五届“强网”拟态防御国际精英挑战赛精彩抢先看!

科技热闻

模块二作业

Ryan

高性能 构架

Mac内存清理工具CleanMyMac2023

茶色酒

CleanMyMacX CleanMyMac X CleanMyMac X2023

分布式计算MapReduce究竟是怎么一回事?

JAVA旭阳

Java 大数据

流处理基础概念-延迟和吞吐

穿过生命散发芬芳

流处理 12月月更

SpringBoot+Mybatis+Mysql项目构建

@下一站

程序设计 12月日更 12月月更 springbootdemo

使用声网 SDK 构建 Piloteer 助盲服务平台的最佳实践

声网

音视频 人工智能’ SDK 教程

分库分表经典15连问

架构师之道

Java MySQL 编程

我在哪里可以获得CleanMyMac2023许可证

茶色酒

CleanMyMac2023

太卷了!5年Java程序员竟然答不出应届生字节二面?

小小怪下士

Java 程序员 字节跳动 面试

Verilog 编译指令

智趣匠

Verilog语法 Verilog编译指令

Python抓取B站"卡塔尔 世界杯"的视频数据

勇士

Python 爬虫 B站 世界杯

2022-12-10:给你一个由小写字母组成的字符串 s ,和一个整数 k 如果满足下述条件,则可以将字符串 t 视作是 理想字符串 : t 是字符串 s 的一个子序列。 t 中每两个 相邻 字母在字

福大大架构师每日一题

算法 rust 福大大

裸辞美团花两月吃透这Java岗798道真题解析,定级阿里P7

钟奕礼

Java 程序员 java面试 java编程

第十届MTSC上 OpenHarmony与开发者共话开源操作系统发展新格局

Geek_2d6073

AWS Storage Gateway 概述,SMB 支持、RefreshCache 事件及更多内容_语言 & 开发_亚马逊云科技 (Amazon Web Services)_InfoQ精选文章