云服务器价格_云数据库_云主机【优惠】最新活动-搜集站云资讯

文件存储_网剧镇魂百度云资源_稳定性好

小七 141 0

学习分布式大数据

在与客户会面、与我们的社区进行众聊以及主持cube的间隙,Wikibon的研究团队(与SiliconANGLE属于同一家公司)抽空会面和讨论有关数字业务转型和技术市场的趋势和话题。我们从商业、物联网、大数据、应用、云和基础设施现代化的角度看待事物。我们利用研究会议的结果来探索新的研究课题,进一步研究当前的研究项目,并分享见解。这是这些例会的第四份调查结果摘要,我们计划每周出版一次。在过去的10年里,企业一直试图通过基于数据湖方法的大数据和高级分析来创造价值,数据湖是企业数据的集中存储,数据科学家和其他人可以"玩玩"。有时这种方法成功地产生了大数据回报。它经常失败。尽管如此,数据湖概念是一个合理的方法,因为它节省了各种稀缺资产,即专业知识、组织注意力、分析工具和专业大数据系统的定制组合。通过将大数据知识积累到一个单一的中心位置,企业可以更快地学习,犯更少的错误,并以一致的方式进行高级和复杂的分析。如今,拥有卓越大数据知识的企业已经开发了一系列大数据系统功能,用于服务于各种分析应用领域,包括欺诈、安全和推荐引擎。尽管这些系统本身就产生了可观的回报,但领先企业正寻求通过将这些系统直接集成到一系列操作、边缘和移动应用程序中来放大大数据价值。这意味着更多的大数据工作将在更接近其支持的事件的地方和时间(即,不是批处理)进行。这是一个挑战,也是一个很大的挑战:当我们分发依赖于大数据的应用程序和工作流时,我们不能再假设一个集中的数据湖可以满足企业的所有大数据需求。大数据需要采用分布式体系结构来发展。但是这种建筑会是什么样子呢?"企业将不得不在不断扩大的其他应用程序中分布大数据工作负载。这需要一个有架构的回应我们的研究表明,分布式大数据架构将具有三个核心属性:分布式大数据将基于混合云。Wikibon的从业者社区很清楚:云在新兴的大数据架构中扮演着重要的角色,但不是唯一的角色。智能将越来越多地被推向边缘和移动系统,这将确保真正的私有云将成为不断发展的大数据系统的关键元素。"在我们参加的各种展会上,我们看到许多构建数据湖的从业者现在正与亚马逊(Amazon)和谷歌(Google)等公司展开了大量合作。所以,希望更多这样的东西生活在那个多云的世界里三类核心大数据服务将成为新架构的基础。分布式大数据架构的核心是:1)微服务和流媒体;2)分布式文件系统和DBMS;3)分布式机器学习。这些服务将是处理数据、移动数据、接收数据、嵌入数据和流水线数据等的基础。虽然这些大型应用程序的流程和管理模式可能会被组织成分布式的,但是对于这些大型的应用程序来说,这些模型和模型将被组织成分布式的。然而,这并不意味着只有一组数据科学家可以主宰所有的建模工作。相反,随着专业知识的扩展和工具的改进,将建立一套通用的建模、培训和测试管理流程,并在"集中化"管理组中普遍实施,事实上,这些管理组很可能与业务、应用程序和技术领域的专业知识保持一致。"如果你看看任何一家公司,看看它稳定的运营系统,大多数系统并不是坐在那里等着你把大数据分析整合到他们身上,以获得更好的洞察力和更好的运营。你得做手术,或者把它们扔出去重新开始。尼尔·雷登是个大问题行动项目。大数据和分析应用程序将被分发。学习如何以最佳方式分发大数据的过程将需要长达五年的时间才能成熟,但一个通用的体系结构正在构思之中,实施该体系结构的通用实践开始扩散,而提高这些实践生产力的工具正开始冲击大数据社区。然而,这是一个没有任何企业愿意落在后面的领域。学习分布式大数据需要强大的CIO领导能力和明确的架构承诺。图片:尼金/皮克斯贝既然你来了…点击订阅我们的YouTube频道(见下文),显示您对我们使命的支持。我们的订户越多,YouTube就越会向你推荐相关的企业和新兴技术内容。谢谢!支持我们的使命:>>>>>立即订阅我们的YouTube频道。……我们还想告诉你我们的使命,以及你如何帮助我们完成它。SiliconANGLE Media Inc.的商业模式是基于内容的内在价值,而不是广告。与许多在线出版物不同的是,我们没有付费墙或横幅广告,因为我们想让我们的新闻保持开放,不受影响,也不需要追逐交通。那个新闻、报道和评论SiliconANGLE——以及现场报道,我们的硅谷工作室和cube环球巡演的视频团队提供的未经剪辑的视频需要大量的辛勤工作、时间和金钱。保持高质量需要赞助商的支持,他们与我们的无广告新闻内容的愿景一致。如果你喜欢这里的报道,视频采访和其他无广告内容,请花点时间看看我们的赞助商支持的视频内容样本,在推特上表达你的支持,然后继续回到SiliconANGLE。