云服务器价格_云数据库_云主机【优惠】最新活动-搜集站云资讯

CDN_vb数据库编程_0元

小七 141 0

宣布新的Azure HPC缓存服务正式提供

如果数据访问挑战一直阻碍你在Azure中运行高性能计算(HPC)作业,我们有好消息要报道!现在可用的Microsoft Azure HPC缓存服务允许您在Azure中运行要求最高的工作负载,而无需重新编写应用程序的时间和成本,并且可以将数据存储在Azure中或本地存储中的任何位置。通过最小化计算和存储之间的延迟,HPC缓存服务无缝地提供在Azure中运行HPC应用程序所需的高速数据访问。使用Azure扩展分析能力,而不必担心数据访问大多数HPC团队认识到了云爆炸扩展分析能力的潜力。虽然许多组织将受益于在云中运行计算作业的容量和规模优势,但用户却因其数据集的大小和提供对这些数据集(通常存储在长时间部署的网络连接存储(NAS)资产上)访问的复杂性而受到阻碍。这些NAS环境通常保存着在很长一段时间内收集的数PB的数据,这意味着大量的基础设施投资。这里是HPC缓存服务可以提供帮助的地方。可以将该服务看作一个边缘缓存,它提供对来自一个或多个位置的POSIX文件数据的低延迟访问,包括本地NAS和归档到Azure Blob存储的数据。HPC缓存使得使用Azure来提高分析吞吐量变得非常容易,即使您的可操作数据的大小和范围不断扩大。跟上可操作数据不断扩大的规模和范围某些行业(如生命科学)的新数据获取率继续推动可操作数据的规模和范围。在这种情况下,可操作数据可能是需要收集后分析和解释的数据集,这些数据集反过来又推动上游活动。例如,一个已测序的基因组可以接近数百千兆字节。随着测序活动的速度增加并变得更加并行,要存储和解释的数据量也会增加,您的基础设施必须跟上。您收集、处理和解释可操作数据的能力您的分析能力直接影响您的组织满足客户需求和利用新商机的能力。一些组织通过继续部署更健壮的本地HPC环境和高速网络和高性能存储来满足不断增长的分析吞吐量需求。但对许多公司来说,扩展内部环境带来了越来越艰巨和代价高昂的挑战。例如,如何准确预测并更经济地满足新的容量需求?如何在设备生命周期和需求激增之间取得最佳平衡?如何确保存储与计算需求保持一致(在延迟和吞吐量方面)?你如何用有限的预算和人力资源来管理所有这些?Azure服务可以帮助您更轻松、更经济高效地将分析吞吐量扩展到现有HPC基础设施的容量之外。您可以使用诸如Azure CycleCloud和Azure批处理之类的工具来协调和安排Azure虚拟机(vm)上的计算作业。通过使用低优先级虚拟机以及Azure虚拟机规模集,更有效地管理成本和规模。使用Azure最新的H系列和N系列虚拟机来满足最复杂工作负载的性能要求。那你怎么开始呢?很简单。通过ExpressRoute将网络连接到Azure,确定将使用哪些虚拟机,并使用CycleLoud或Batch voila协调进程,您的burstable HPC环境已准备就绪。你需要做的就是输入数据。好吧,这就是坚持者。这就是您需要HPC缓存服务的地方。使用HPC缓存确保快速、一致的数据访问大多数组织都认识到使用云的好处:一个稳定的HPC环境可以在不强制进行新的资本投资的情况下为您提供更多的分析能力。而且Azure还提供了额外的优点,允许您利用当前的调度程序和其他工具集来确保部署与您的内部部署环境保持一致。但在数据方面,这里有个问题。您的库、应用程序和数据位置可能需要相同的一致性。在某些情况下,本地分析管道可能依赖于POSIX路径,这些路径无论是在Azure中运行还是在本地运行都必须相同。数据可能在目录之间链接,这些链接可能需要在云中以相同的方式部署。数据本身可能驻留在多个位置,必须进行聚合。最重要的是,访问的延迟必须与本地HPC环境中可以实现的一致。要了解HPC缓存如何满足这些需求,可以将其视为一个边缘缓存,它提供对来自一个或多个位置的POSIX文件数据的低延迟访问。例如,本地环境可能包含连接到商业NAS解决方案的大型HPC群集。HPC缓存允许从该NAS解决方案访问跨WAN链接运行的Azure虚拟机、容器或机器学习例程。该服务通过缓存客户端请求(包括来自虚拟机的请求)来实现这一点,并确保该数据的后续访问由缓存提供服务,而不是通过重新访问本地NAS环境来实现。这使您能够以与在自己的数据中心中运行类似的性能级别运行HPC作业。HPC缓存还允许您构建一个命名空间,该命名空间由位于多个源的多个导出中的数据组成,同时向客户机显示一个目录结构。hpccache在Azure中也提供了一个Blob支持的缓存(我们称之为POSIX),方便了基于文件的管道的迁移,而无需重写应用程序。例如,基因研究团队可以将参考基因组数据加载到Blob环境中,以进一步优化二次分析工作流的性能。这有助于在启动依赖于一组静态引用库或工具的新作业时减轻任何延迟问题。  Azure HPC缓存体系结构HPC缓存的好处缓存吞吐量以满足工作负载要求HPC缓存提供三个SKU:高达每秒2GB(GB/s)、高达4GB/s和高达8Gb/s的吞吐量。这些sku中的每一个都可以为来自成千上万个vm、容器等的请求提供服务。此外,您可以选择缓存磁盘的大小来控制成本,同时确保有适当的容量可用于缓存。数据中心的数据爆炸HPC缓存从NAS获取数据,无论它在哪里。现在就运行您的HPC工作负载,并找出长期的数据存储策略。高可用性连接HPC缓存为客户端提供高可用性(HA)连接,这是在更大范围内运行计算作业的关键要求。聚合命名空间HPC缓存聚合命名空间功能允许您从各种数据源构建命名空间。这种对源的抽象使得使用一致的数据视图运行多个HPC缓存环境成为可能。成本更低的存储,完全符合POSIX的Blob as POSIXHPC缓存支持基于Blob的、完全兼容POSIX的存储。HPC缓存使用Blob作为POSIX格式,维护包括硬链接在内的完整POSIX支持。如果你需要的话,你可以在这个级别上得到全部的分数。从这里开始Azure HPC缓存服务现在可用,现在可以访问。要获得最佳结果,请与您的Microsoft团队或相关合作伙伴联系,他们将帮助您构建一个全面的体系结构,以最佳方式满足您的特定业务目标和期望的结果。我们的专家将出席在科罗拉多州丹佛市举行的SC19高性能计算会议,随时准备帮助您加快Azure中基于文件的工作负载!