云服务器价格_云数据库_云主机【优惠】最新活动-搜集站云资讯

分布式数据库_疾病数据库_企业级

小七 141 0

Azure Data Lake Storage Gen2的文件系统SDK现已正式提供

自从Azure Data Lake Storage(ADLS)Gen2于2019年2月正式上市以来,客户一直在深入了解其云规模的大数据分析工作负载。与分析引擎的集成对于其分析工作负载至关重要,同样重要的是能够以编程方式接收、管理和分析数据。这种能力对于企业数据湖的关键领域至关重要,例如数据摄取、事件驱动的大数据平台、机器学习(ML)和高级分析。如今,使用ADLS gen2restapi、Blob restapi或通过多协议访问的功能,可以进行编程访问。作为开发人员生态系统旅程的一部分,我们的目标是使客户应用程序开发变得比以前更容易编程访问。为了实现这一目标,我们宣布在所有Azure区域中,为azuredatalakestorage(ADLS)Gen2提供Python、.NET、Java和JS文件系统sdk。这包括对文件系统、目录、文件和权限的CRUD操作的支持,以及adlsgen2的文件系统语义。客户现在可以使用这个熟悉的文件系统编程模型来简化adlsgen2的应用程序开发。这些文件系统SDK简化了我们的客户接收、管理和分析ADLGen2数据的能力,并帮助他们以前所未有的速度获得云端规模的洞察力。预览反馈我们的许多客户已经为他们的场景成功地试用了adlsgen2sdk预览版。以下是一些基于预览反馈的常见主题:SDK正在与新的文件系统语义无缝协作,并成功地将关键数据域迁移到adlsgen2。SDK在几个小时内加快了从adlsgen1到adlsgen2的450gb数据的传输。在根目录上设置的权限在启用分层命名空间的情况下运行良好,所有权限都通过文件夹层次结构完美地传播到子项。SDK对于客户安排部署的方式至关重要。SDK帮助吸收了大量的物联网数据,供数据科学家用于分析工作负载。这有助于为研究人员提供自助服务环境,以访问他们自己的目录集。数据摄取管道已经使用SDK将无人机图像数据、卫星图像数据、地面传感器数据和天气数据集成到adlsgen2中。这有助于构建定制ML模型,从而为客户生成额外的业务洞察力。客户可以使用这些ML模型或根据需要聚合原始数据,并将处理后的结果存储回ADLS Gen2。客户对SDK预览反馈已经作为预览构建的一部分进行了处理,并热切地等待着它的正式发布。客户已经成功地执行了各种测试,包括使用adlsgen2sdk创建和附加文件,以及使用Blob restapi测试读取根据您的预览反馈,我们还为批量上传引入了新的api,简化了ADLS Gen2的更大数据写入/附加的体验。详细文档可在以下链接中找到:.NET SDK开发包开发包Java SDK开发包JS SDK开发包PowerShell和CLI将继续在所有Azure地区提供全球预览。我们将在收到预览反馈后立即宣布PowerShell和CLI的全面可用性。PowerShellAzure CLI下一步行动我们欢迎您的反馈,以继续丰富ADLS Gen2开发人员的体验,并感谢所有人为实现这个高价值版本而进行的合作。我们期待着这些强有力的合作伙伴关系在未来的投资以及我们的开发生态系统的旅程。