报名参加CloudWeGo黑客松,奖金直推双丰收! 了解详情
写点什么

AWS Storage Gateway 概述,SMB 支持、RefreshCache 事件及更多内容

  • 2019-10-22
  • 本文字数:1586 字

    阅读完需:约 5 分钟

AWS Storage Gateway 概述,SMB 支持、RefreshCache 事件及更多内容

借用我自己以前说过的话AWS Storage Gateway 是一项包含多协议存储设备的服务,适合用于您的现有应用程序与 AWS 云之间。根据配置方式的不同,您的应用程序会将网关视为文件系统、本地磁盘卷或虚拟磁带库。


今天,我想分享一些有关 Storage Gateway 的文件网关配置的新近更新,还会展示一下如何将其结合使用,以支持某些新的处理模型。首先,我们来看一下最新更新:


SMB 支持 – 文件网关已支持通过使用 NFS(支持版本 3 和 4.1)的客户端进行访问。上个月,我们添加了对服务器信息块 (SMB) 协议的支持。这允许使用 SMB v2 或 v3 进行通信的 Windows 应用程序通过网关将文件作为对象存储在 S3 中,从而实现混合云使用案例,例如备份、内容分发以及机器学习和大数据工作负载的处理。您可以使用现有的本地 Active Directory (AD) 域或 AWS Directory Service 中托管的基于云的域来控制对网关的访问,也可以使用经过身份验证的访客访问。要了解更多有关此次更新的信息,请参阅 AWS Storage Gateway 添加 SMB 支持以在 Amazon S3 存储桶中存储和访问对象


跨账户权限 – 部分客户在一个 AWS 账户中运行网关,并将其配置为上传到另一个账户拥有的 S3 存储桶。这允许他们使用实际扣款和名义扣款模型跟踪部门存储和检索成本。为了简化此重要使用案例,您可以配置网关,以便为存储桶拥有者提供完整权限。这可以避免存储桶拥有者无法查看对象时出现的难题。要了解具体设置方法,请参阅使用文件共享进行跨账户访问


申请方付款 – 存储桶拥有者负责存储成本。默认情况下由拥有者支付数据传输费用,但也可以选择由申请方付款。为了支持此使用案例,文件网关现支持 S3 的申请方付款存储桶。数据收集者和聚合者可以使用此功能,与大学和实验室等研究组织共享数据,而不会产生访问成本。文件网关提供对 S3 对象的基于文件的访问权限,在本地缓存最近访问的数据,从而帮助申请方降低延迟和成本。要了解更多信息,请参阅创建 NFS 文件共享创建 SMB 文件共享


文件上传通知 – 网关在本地缓存文件,并在后台将其上传到指定的 S3 存储桶。去年年底,我们为您提供了请求在上传新文件时接收通知(以 CloudWatch 事件的形式)的功能。您可以利用此功能,启动基于云的处理,或者实施高级日志记录。要了解更多信息,请参阅收到文件上传通知,并研究 NotifyWhenUploaded 函数。


缓存刷新事件 – 您很早之前就已可使用 RefreshCache 函数来确保网关关注存储桶中的对象添加、删除或替换。新的 Storage Gateway 缓存刷新事件可让您了解缓存现与 S3 保持同步,并可用作启动本地处理的信号。要了解更多信息,请参阅获取刷新缓存通知


使用文件网关的混合处理


您可以使用文件上传通知和缓存刷新来自动执行一些例行混合处理任务!


假设您经营着一家分散在多个地理位置的办公企业或零售企业,经营网点遍布全球各地。您在每个位置收集原始数据(指标、收银机收据或时间表),然后使用托管在各位置的文件网关将这些数据上传到 S3。在收到数据时,您使用文件上传通知处理各 S3 对象,或许会利用一个 AWS Lambda 函数,调用 Amazon Athena 对各对象运行一组查询。数据集中在几个小时的时间段内送达,结果造成大量数据聚集在另一个存储桶内。在报告期结束时,中间结果将得到处理,系统会为每个分支位置生成自定义报告,然后将其存储在另一个存储桶中(事实证明,这个存储桶也与网关相关联,并且每个网关都拥有先前版本报告的缓存副本)。生成报告后,您可以刷新各网关缓存,等待相应的通知,然后向分支经理发送电子邮件,告知他们新报告已经可用。


有关此处理模型的更多信息,请观看以下视频(及演示文稿):



现已推出


上述所有功能均已推出,从现在起,即可在提供 Storage Gateway 的所有区域使用。


本文转载自 AWS 技术博客。


原文链接:


https://amazonaws-china.com/cn/blogs/china/aws-storage-gateway-recap-smb-support-refreshcache-event-and-more/


2019-10-22 08:00942

评论

发布
暂无评论
发现更多内容

深度学习应用篇-计算机视觉-目标检测[4]:综述、边界框bounding box、锚框(Anchor box)、交并比、非极大值抑制NMS、SoftNMS

汀丶人工智能

人工智能 深度学习 计算机视觉 目标检测 6 月 优质更文活动

打造高可用的微服务架构:Spring Cloud 的优化与实践

xfgg

Java 微服务 SpringCloud 6 月 优质更文活动

【体验有奖】玩转 AIGC,函数计算 x 通义千问预体验,一键部署AI应用赢Airpods

Serverless Devs

函数计算FC AIGC

深入了解mock.js,打造出类似真实数据的模拟数据

Apifox

程序员 前端 前端开发 API Mock

让ChatGPT来写今年的高考作文,能得几分?

楚少AI

ChatGPT4 2023高考 ChatGPT写作

阿里P8现身说法,解密“架构”原理与实战笔记:从分布式到微服务

做梦都在改BUG

Java 架构 分布式 微服务

Jogger慢跑者链游系统开发NFT技术

薇電13242772558

NFT 链游

大厂面试必备!字节大佬刷Leetcode总结的算法笔记

做梦都在改BUG

Java 数据结构 算法 LeetCode

探究核心技术&最佳实践,云原生OLAP论坛火热开启!

阿里云大数据AI技术

云原生

2023世界人工智能大会“AI生成与垂直大语言模型”论坛重磅来袭!

NLP资深玩家

咸阳有没有等保测评机构?在哪里?怎么联系?

行云管家

等保 等保测评 等保测评机构 咸阳

浅谈微服务异步解决方案

做梦都在改BUG

Java 微服务 异步

OpenHarmony 4.0 Beta1发布,邀您体验

OpenHarmony开发者

OpenHarmony

什么是双机热备技术?华为和思科如何实现双机热备?

做梦都在改BUG

Java 网络 双机热备

瞄准“量效”难题,百度营销创新推出大健康线索营销解决方案-医效通

说山水

Openjob 1.0.2 重磅发布,新一代分布式任务调度框架

stelin

分布式架构 Java 分布式

架构模块一作业

sandywrh

等待还是转行?GitHub爆赞的10W字Java八股文,你没得选择

做梦都在改BUG

Java java面试 Java八股文 Java面试题 Java面试八股文

10分钟了解Kubernetes网络

俞凡

架构 Kubernetes 云原生

深度学习应用篇-计算机视觉-图像分类[3]:ResNeXt、Res2Net、Swin Transformer、Vision Transformer等模型结构、实现、模型特点详细介绍

汀丶人工智能

人工智能 深度学习 计算机视觉 图像分类 6 月 优质更文活动

深入探究Flink:实时处理与批量处理的完美结合

xfgg

Java flink 6 月 优质更文活动

用户组是什么意思?怎么容易理解?有什么作用?

行云管家

运维 权限 用户组

问道价值互联网,区块链的下一个十年 | 2023开放原子全球开源峰会区块链分论坛即将启幕

开放原子开源基金会

区块链 开源 开放原子全球开源峰会

Amazon CodeWhisperer代码提示体验本文带你了解

我叫于豆豆吖.

云计算 亚马逊 亚马逊云

赋能生态合作 共话数字创新 | 2023开放原子全球开源峰会软硬协同开源分论坛即将启幕

开放原子开源基金会

开源 开放原子全球开源峰会 开放原子 软硬协同开源

“变脸的秘密”!直播源码app开发技术特效功能的实现

山东布谷科技

源码剖析 APP开发 软件开发、 源码搭建 直播源码

来了解Amazon CodeWhisperer的强大吧

初学者

云计算 亚马逊 亚马逊云

百度离线资源治理

百度Geek说

数据库 大数据 离线 企业号 6 月 PK 榜 6 月 优质更文活动

最强AIGC实战应用速成指南来了!14天掌握核心技术

飞桨PaddlePaddle

人工智能 深度学习 百度飞桨

首款搭载OpenHarmony 3.2的智能POS终端通过“开源鸿蒙”兼容性测评

科技热闻

来自大佬的洗礼!全网独家的SpringBoot核心文档,讲的太清晰了

做梦都在改BUG

Java Spring Boot

AWS Storage Gateway 概述,SMB 支持、RefreshCache 事件及更多内容_语言 & 开发_亚马逊云科技 (Amazon Web Services)_InfoQ精选文章