tencent cloud

文档反馈

功能介绍

最后更新时间:2024-01-22 22:15:47

    功能简介

    数据生命周期管理是腾讯云 CFS 为解决文件存储在大规模数据存储下,高性能和低成本无法兼顾的问题,而提供的高级数据管理功能。 通过此功能,用户可以设置自定义的数据生命周期管理策略,文件系统可根据此策略,自动将冷数据沉降到单位成本更低的低频存储介质上,并在业务需要访问时自动的将数据拉取到文件存储里,整个过程业务无感知,进而实现更低的单位成本。

    应用场景

    海量数据存储

    在海量数据存储场景下,过去云文件存储通常因为单价较高的原因,而无法满足用户对成本控制的要求。过去通常的解决方案是通过工具手动的将数据存放到对象存储上,而如今通过数据生命周期管理的功能,通过简单的配置即可自动的完成业务无感知的数据沉降,极大的简化了操作过程,并能大幅降低总数据存储成本。

    冷热数据

    在自动驾驶、AI 训练、离线分析等场景,数据的访问热度具有明显的区分度,新写入的数据往往会在一段时间内非常高频的访问,而相对较老的数据会随着时间的推移逐渐降低访问频率。在此场景下,使用数据生命周期管理功能,可以非常好的契合此类使用方式,在满足高性能读写要求的前提下,大幅降低冷数据存储成本。

    功能优势

    支持灵活的生命周期策略

    支持基于指定目录设置策略,不同的业务对生命周期策略的诉求往往存在差异,基于目录进行策略的划分,能更好的满足业务对多样性策略的诉求。
    支持基于文件大小设置策略,大文件在沉降后拉取的时间较长,若业务对大文件读延时敏感,可灵活地设置策略适用的文件大小,满足用户对业务时效性的要求。
    支持基于访问周期设置策略,可根据实际业务的性质和特征,灵活的调整沉降的范围,降低反复沉降、拉取对业务带来的影响,更高效的利用生命周期策略。

    业务无感知

    在配置生命周期策略后,数据沉降和拉取的动作为系统全自动化实现,业务访问方式无需进行任何改造。

    降低成本

    基于数据生命周期管理功能,将冷热数据分层存储,部分场景可使单位成本最高达70%以上降幅。

    功能详情说明

    生命周期管理策略

    创建生命周期管理策略时,可以配置管理规则,将距最近一次访问14天、30天、60天、90天以上的文件转换为低频存储文件。生命周期管理会依照文件的访问时间(即 atime)来进行判断。
    以下操作会更新访问时间:
    读取文件
    写入文件
    以下操作不会更新访问时间:
    查询文件元数据(如 ls、state 等操作)
    重命名一个文件
    修改文件元数据如用户(user)、用户组(group)、模式(mode)等

    数据沉降/加载流程

    数据沉降对应着数据从 Turbo 文件系统到低频存储的流动。当满足触发策略条件后,系统会根据系统当前的负载情况,自动调整并发数,将数据进行拷贝至低频存储。并在一小时后对 Turbo 文件存储中的数据部分进行释放,保留元数据信息。
    数据加载对应着数据从低频存储向 Turbo 文件系统的流动。当业务初次访问在低频存储中的数据时,系统会首先将数据从低频存储拉取至 Turbo 文件系统,此步骤会耗费一定的时间,具体依赖于文件的大小和系统负载情况。之后对此数据的访问,将全部从 Turbo 文件系统中进行。
    联系我们

    联系我们,为您的业务提供专属服务。

    技术支持

    如果你想寻求进一步的帮助,通过工单与我们进行联络。我们提供7x24的工单服务。

    7x24 电话支持