云服务器价格_云数据库_云主机【优惠】最新活动-搜集站云资讯

分布式存储_阿里云郭雪梅_高性价比

小七 141 0

LinkedIn最新的开源项目旨在使卡夫卡自动化

用于管理Netflix公司和高盛集团(Goldman Sachs Group Inc.)等公司内部数据流的框架ApacheKafka正在获得可用性提升。这笔资金来自LinkedIn的一个新的开源项目,LinkedIn最初在2011年创建了Kafka。这个被称为巡航控制的工具是由SocialNetwork开发的,目的是使数据流框架的内部部署自动化。LinkedIn说,这个集群包含1800多个独立的Kafka实例,还有更多的实例。 微软子公司cruisecontrol为简化内部操作而在巡航控制中加入的功能,对其他组织来说也很方便。具体地说,该工具简化了几个任务,这些任务共同负责维护Kafka集群通常涉及的大部分管理工作。巡航控制在两个方面特别有用。LinkedIn称,首先是优化基础设施利用率。该工具能够自动对每个Kafka实例使用的硬件数量实施用户定义的限制。管理员可以使用该功能来防止一个实例使用了太多资源而导致其对等机无法高效运行的情况。由于公司依赖Kafka来支持一些最重要的工作负载,这种能力有可能防止重大的运营中断。巡航控制旨在实现自动化的另一个主要任务是灾难恢复。当Kafka实例失败时,该工具将重新启动它在部署中其他节点上运行的进程。LinkedIn表示,未来该功能可能会被扩充,以自动用备份池中的新节点替换故障实例。巡航控制可以通过一个相对简单的编程接口进行管理。管理员指定他们的高级操作需求,其余的由工具负责。分析组件根据巡航控制运行的环境模型确定应如何执行单个操作。LinkedIn说,尽管它是为卡夫卡设计的,但它也能支持其他应用程序。该公司认为自己的能力特别适合于存储大量数据的所谓有状态工作负载。LinkedIn已经在GitHub上提供了巡航控制的源代码。图片:反斜杠既然你来了…点击订阅我们的YouTube频道(见下文),显示您对我们使命的支持。我们的订户越多,YouTube就越会向你推荐相关的企业和新兴技术内容。谢谢!支持我们的使命:>>>>>立即订阅我们的YouTube频道。……我们还想告诉你我们的使命,以及你如何帮助我们完成它。SiliconANGLE Media Inc.的商业模式是基于内容的内在价值,而不是广告。与许多在线出版物不同的是,我们没有付费墙或横幅广告,因为我们想让我们的新闻保持开放,不受影响,也不需要追逐交通。那个新闻、报道和评论SiliconANGLE——以及现场报道,我们的硅谷工作室和cube环球巡演的视频团队提供的未经剪辑的视频需要大量的辛勤工作、时间和金钱。保持高质量需要赞助商的支持,他们与我们的无广告新闻内容的愿景一致。如果你喜欢这里的报道,视频采访和其他无广告内容,请花点时间看看我们的赞助商支持的视频内容样本,在推特上表达你的支持,然后继续回到SiliconANGLE。