云网站服务器_国内数据云存储_移动云数据库服务器主机-搜集站云

轻量服务器_网站服务器失去响应_9元

小七 141 0

本文对SAP云平台大数据服务(SAP software corporation的流行解决方案之一)进行了深入了解。它允许客户基于云服务订阅在Hadoop中处理大数据。

商业生态系统中的大数据

众所周知,SAP解决方案被来自不同行业的主要国际公司使用,包括冶金、石油和天然气,以及其他保守的经济部门。这家软件巨头为他们开发和部署现代IT解决方案。如今,这些企业在物联网、机器学习或大数据处理等前沿技术上的投资越来越多。例如,在当前的经济和地缘政治形势下,每日返利,冶金企业正在努力寻找新的收入来源或削减开支的方法。大数据可以帮助他们产生新的想法,因为它充分说明了全球行业的总体趋势,特别是他们的业务流程。

有很多服务,包括开源和商业服务,可以存储和使用大数据。Hadoop及其附加组件是最流行的。使其成为市场领先解决方案的特点包括:

可靠性可扩展性价格合理的数据存储用于处理数据的各种附加开源组件,如Hive、Spark等。很多精通Hadoop的专家

零成本开源解决方案的流行是可以理解的。然而,在Hadoop被部署用于工业用途的场景中,免费的开源服务几乎从未以其纯粹的、原始的形式被利用。取而代之的是,基于Hadoop的开源解决方案的商业变体在企业中越来越受欢迎。Hortonworks和Cloudera是这些产品的一些知名供应商,但还有更多的供应商。这些公司的责任归结为交付可靠的软件和确保所有组件的无缝交互。一些服务采用了不同的方法,使其客户能够在订阅的基础上通过云处理大数据。

在某些时候,爱返利,许多公司在处理大数据的本地方法和云方法之间面临着艰难的选择。由于担心云的可靠性,大多数IT团队更喜欢前者。

在处理大数据的初始阶段,在本地服务器上部署Hadoop并不难,这伴随着常见的假设测试和其他检查。一旦你转向解决方案的商业用途,事情就变得更复杂了,因为它需要满足特定的要求:SLA正常运行时间为99.9%,保证存储大量数据的高可靠性,以及遵守预定义的KPI。

如果你选择在本地生产中部署Hadoop,以下任务你的待办事项清单上有:

雇佣熟练的IT专家购买合适的硬件购买必要的分发包,安装和优化软件在生产中启动解决方案投入定期维护(人员工资、硬件维护等)

值得一提的是,这个初步阶段需要相当长的时间。这就是为什么企业往往很难决定哪种方法——内部部署还是云计算——最适合他们的原因。

贝恩公司,一家著名的管理咨询公司,在他们的一份报告中提到了Netflix的案例。2016年,这家媒体服务提供商声称,为了处理大数据,他们必须在巨大负载下处理数千个节点。特别是,他们每天都在处理大约3500亿个用户生成的事件和与服务相关的数PB的数据。显然,只有内部服务器无法实现这一目标,大数据是数据,除非您一直忙于建设新的数据中心。

SAP也加入了云计算热潮。2016年,该公司与全球领先的大数据即服务提供商Altiscale合作。由此产生的产品是SAP云平台大数据服务。SAP客户可以使用云订阅模型从该解决方案中获益。它还嵌入到SAP的通用云基础设施中。

那么,什么是SAP云平台大数据服务,SAP基于云的Hadoop服务?

SAP云平台大数据服务是基于SaaS(软件即服务)模式的大数据处理工具包。它包括以下三个主要组件:

Apache Hadoop cluster

这个集群是使用Hadoop编译的,符合ODPi认证。这意味着在其他服务的ODPi生态系统中使用的应用程序和脚本可以在SAP大数据服务中成功执行。

集群依次包括三个节点:控制节点("namenode")、维护节点("secondary namenode")和数据节点("resource manager")。服务的初始设置已经包括了纱线集群管理技术。

辅助名称节点支持附加服务,如Oozie、Hive Metastore等。当客户订阅解决方案时,他们会得到一个单独的集群,其中包含所有必要的资源。这些资源的度量是基于存储空间和机器小时数。集群的资源可以在关键计算期间灵活增加,必要时可以永久增加。

Workbench,一体式接入点

为了安全起见,直接访问Hadoop集群的权限仅限于操作人员和Workbench。客户只能访问Workbench,它跨越本地Hadoop以及Spark、Hive、Oozie、Pig和数据科学和工程所需的其他组件,包括SAP Predictive Analytics和SAP Lumira。

客户可以使用Workbench启动脚本、使用商业智能工具检查数据和解决其他任务。Workbench通过高容量通道与Hadoop集群紧密交互。

大数据服务仪表板

此元素的目的是提供适当的用户体验,生成访问大数据服务的密钥,提供集群使用统计,物联网的前景,执行客户可能遇到的其他日常任务。