云服务器价格_云数据库_云主机【优惠】最新活动-搜集站云资讯

香港带宽_无法连接ftp服务器_9元

小七 141 0

Qubole整合了机器学习来自动化大数据工作负载

作为服务公司的大数据公司Qubole Inc.今天宣布推出全球首个"自主数据平台",拉开了2017年数据平台大会的序幕新平台旨在帮助企业扩展其大数据团队和项目,通过自动化许多以前由人工操作员完成的繁琐而耗时的任务。该公司表示,新平台整合了三个独立的产品:Qubole数据服务社区版、QDS企业版和QDS云代理,这三个产品结合起来可以智能地自动化和分析平台使用情况,从而提高效率。早在2011年,Qubole就凭借其独创的Qubole数据服务产品进入了新生的大数据领域。QDS提供了一个简单的用户界面,屏蔽了apachehadoop大数据框架的复杂性,从而帮助组织更容易地利用其功能。它的工作原理是这样的:使用QDS的预打包连接器来检索数据,允许用户输入简单的查询,并让底层的算法从中获取数据。该平台分配特定请求所需的硬件资源,并在完成所有操作后立即释放基础设施,以将开销降至最低。这种自动化使客户能够比在手动管理的部署中更容易地利用Hadoop及其周围的组件生态系统。Qubole说,在一个组织面临大规模收集、处理和分析数据的巨大困难的世界里,数据平台的自动化变得越来越必要。Qubole说,这既归因于大数据的复杂性,也归因于缺乏熟练的数据科学家、工程师和分析师,这些问题使得如果企业要扩大其大数据计划,就必须自动化人工工作并增加人工任务。Qubole的新平台能够自我管理和自我优化,通过观察平台使用情况来学习,从而提高数据团队的效率。具体来说,它分析来自查询、集群、用户和平台接收到的数据的元数据,并使用机器学习来创建警报、见解、建议以及自主代理,这些代理可以在不需要人工输入的情况下执行必要的操作。Qubole的联合创始人兼首席执行官Ashish Thusoo(如图)说:"尽管有各种承诺和技术进步,但对大多数组织来说,实施大数据工作仍然是不可能的。"数据团队根本无法扩展以满足跨组织不断增长的数据需求。为了解决这一障碍,我们的使命是消除维护大数据基础设施所带来的人工工作,并使数据团队能够专注于高价值的战略性工作。"新平台最有趣的组件是QDS云代理,它是指一组"软件代理",可以执行以前由人类处理的繁琐而耗时的任务。Qubole为这个初始版本创建了三个软件代理,包括一个支持工作负载的自动伸缩代理,它能够根据工作负载需求优化集群大小,从而减少资源的过度配置。还有一个数据缓存代理,它允许用户优化其数据的位置以获得更快的访问速度。最后,还有一个专门针对Amazon Web服务的Spot Shopper代理,它在AWS云上进行购物,以最佳的性价比组合来组装计算实例。代理会浏览各种AWS Spot实例、Spot块、混合实例类型和不同的可用性区域,以便在这个精确的时间为客户找到最划算的交易。Qubole认为,通过这样做,公司可以节省高达80%的按需实例成本。新平台将于7月推出。图片:SiliconANGLE既然你来了…点击订阅我们的YouTube频道(见下文),显示您对我们使命的支持。我们的订户越多,YouTube就越会向你推荐相关的企业和新兴技术内容。谢谢!支持我们的使命:>>>>>立即订阅我们的YouTube频道。……我们还想告诉你我们的使命,以及你如何帮助我们完成它。SiliconANGLE Media Inc.的商业模式是基于内容的内在价值,而不是广告。与许多在线出版物不同的是,我们没有付费墙或横幅广告,因为我们想让我们的新闻保持开放,不受影响,也不需要追逐交通。那个新闻、报道和评论SiliconANGLE——以及现场报道,我们的硅谷工作室和cube环球巡演的视频团队提供的未经剪辑的视频需要大量的辛勤工作、时间和金钱。保持高质量需要赞助商的支持,他们与我们的无广告新闻内容的愿景一致。如果你喜欢这里的报道,视频采访和其他无广告内容,请花点时间看看我们的赞助商支持的视频内容样本,在推特上表达你的支持,然后继续回到SiliconANGLE。