在cohereity，我们的任务是重新定义辅助存储。我们认为，传统的重复数据消除设备、备份软件和NAS等传统存储解决方案无法满足现代企业的需要。企业必须管理快速增长的数据量，据IDC预测，到2025年，数据量将从2016年的6兆字节增加到93兆字节。企业也在向多云发展，必须使数据在云环境中随时可用，以便进行恢复、测试/开发和分析。为了解决这些企业难题，Cohereity率先提出了超级聚合辅助存储的概念，它使企业能够：在一个web级平台上整合所有辅助存储，包括备份、文件和对象立即提供数据以进行恢复、测试/开发和分析跨多云环境管理数据但是，我们无法实现使用过时的旧文件系统实现超级合并辅助存储的设想。传统文件系统仅围绕一个使用情形进行了优化，例如针对备份目标的可变长度内联重复数据消除。为了打破原有的存储孤岛，cohereity必须构建一个全新的文件系统：SpanFS。SpanFS旨在在web规模的平台上有效地整合和管理所有辅助数据，包括备份、文件、对象、测试/开发和分析数据。SpanFS是业界唯一一个在web级平台上同时提供NFS、SMB和S3接口、全局重复数据消除以及无限快照和克隆的文件系统。它还提供了与公共云的本机集成，以支持多云数据结构，使企业能够将数据发送到云端进行存档或更高级的使用案例，如灾难恢复、测试/开发和分析。所有这些都是在web规模的体系结构上完成的，以有效地管理不断增长的数据量。让我们更仔细地看一下SpanFS的体系结构，以及它与传统文件系统的根本区别。在最顶层，SpanFS公开了行业标准、全球分布的NFS、SMB和S3接口。在访问协议下，IO引擎管理写入或从系统读取的所有数据的IO操作。它检测随机IO配置文件与顺序IO配置文件，将数据分成块，执行重复数据消除，并根据IO配置文件将数据定向到最合适的存储层（SSD、HDD、云存储）。为了跟踪跨节点的数据，cohereity还必须构建一个全新的元数据存储。元数据存储包含一个一致的、分布式的NoSQL存储，用于大规模的快速IO操作，SnapTree提供了基于B+树概念的分布式元数据结构。SnapTree的独特之处在于它能够支持无限、频繁的快照，而不会降低性能。SpanFS在堆栈的所有层都构建了QoS控件，以支持工作负载和基于租户的QoS。它还可以将数据复制、归档和分层到另一个一致性集群或云上。SnapTree引入了一种全新的大规模管理元数据的方法。在旧式存储中，快照形成一个链接链，每个链接都包含以前快照的更改。每次执行新快照时，都会向链中添加额外的链接，从而增加性能开销。为了在web范围内提供无限的快照和克隆，SnapTree使用B+树元数据结构管理元数据，但增加了多种创新，包括：跨节点分布树提供来自多个节点的并发访问支持创建即时克隆和快照使用SnapTree，视图（卷）和文件由指向底层数据的指针树表示。根节点表示视图或单个文件。根节点指向一些中间节点，这些中间节点又指向包含数据块位置的叶节点。客户可以对整个视图（卷）或视图中的单个文件进行快照。拍摄快照时，从根到叶的跳跃数不会增加。客户可以根据需要频繁地拍摄快照，而不会出现性能下降的情况。SpanFS和SnapTree一起提供了一个专门为辅助存储整合而设计的独特文件系统。这是使超融合二次存储成为可能的技术基础。并允许您收回对数据的控制权。要了解有关SpanFS和SnapTree的更多信息：下载白皮书观看lightboard视频访问网页