随着5G、大数据、人工智能等新兴技术的发展,数据呈爆发式增长。据IDC预计,到2025年,全球将有175 ZB的数据总量,数据存储将成为企业的刚性需求,进而存储的可扩展性、容量及安全等问题成为企业选择存储平台重点考虑的要素。
中国电信天翼云存储历经多年发展,已于2017年实现单容器实存数据超EB级的跨多机房的强一致分布式存储系统,过去的连续数十个月内每周的服务可用性超99.995%。
未来移动互联网应用成为主流,网络核心就是存储,个人数据和企业非核心数据通过网络进行存取是大势所趋。2015年,中国电信集团首席专家江峰在知名云计算行业大会提出,中国电信将结合网络资源优势打造国家存储网络。天翼云充分发挥中国电信网络优势,把孤立的云从管理和数据平面打通,形成一朵“大云”,给客户更好的感知。2018年,天翼云承接iCloud服务时,宣布采用中国电信自主研发的存储网络OOS提供底层数据存储和访问服务。据了解,早在 2015 年,天翼云OOS v5.0 已经实现“跨区域复制”这一业内领先的能力。
天翼云存储OOS团队经过多年研究,攻克“广域网环境下如何确保稳定性”的技术难点,降低了网络波动对存储系统的影响,提升服务稳定性。同时,基于全局元数据环技术,实现了跨地域的分布式架构“虚拟存储网络”和“业务场景敏感的数据交付”模型。不仅如此,中国电信的存储网络OOS还支持资源统一,就近访问,多站点多活等功能,满足用户在强一致性和最终一致性间进行灵活选择。
近日,天翼云存储OOS团队撰写的论文《一种面向大规模应用的分布式业务感知的存储执行环境》被分布式领域顶级会议ICA3PP全文发表。
天翼云存储网络基于自主研发的IaaS层对象存储产品、结合中国电信网络资源,通过在全国主要省市自建存储资源池,实现的大规模海量数据存储平台。同时,实现跨多机房的强一致系统,跨多机房一地数据写入成功后,其他机房数据即时可读,满足客户特殊场景需求,跨广域网的元数据环服务使上层应用可以轻松创建分布全国的表结构,元数据层就近提供服务。
通过“故障智能检测技术”,天翼云存储网络能够在发生硬件故障、网络抖动时,使平台仍能够持续提供稳定服务。通过采用中国电信独有的网络负载均衡技术,提高服务器的响应速度与总体性能,自动监听服务器网络服务状态,迅速切换优质网络平面,保证业务稳定。
天翼云存储设计可以兼容SMR磁盘的一套类似文件系统的Key-Value存储系统——KVDisker。结合对象存储的特性,KVDisker能够有效降低SMR技术引用带来的问题与风险,将技术与应用完美融合,开创了将SMR磁盘有效应用于云存储服务领域的先河。此外,KVDisker是天翼云存储团队完全自主研发,不基于任何已有文件系统(如EXT/XFS)及任何支持SMR的开源软件,实现直接读写磁盘的技术。通过该项技术,实现成本降低20%以上,并从2015年开始就将该技术广泛的应用于海量规模的存储服务。从运行效果来看,在确保读写性能提高的同时,LIST性能提升了一个数量级且系统开销也大大降低。
未来,天翼云存储将继续坚持创新理念,坚定自主研发路线,不断提升元数据服务、数据访问、空间分配回收等多方面的性能及稳定性,在保障服务安全、数据不不丢失的基础上,使服务可用性向5个9等级稳步迈进,为更多的海量数据存储业务保驾护航。