广东省数据知识产权存证登记平台-证书详情

登记信息

恒电科技异构算力容器化任务资源监控数据集 已登记

数据申请号：

粤2025101402135
数据登记号：

SZ2025120026802.8
关键词：

异构计算、容器监控、算力调度、时间序列数据
登记时间：

2026-02-14
平台证书编号：

20251044000026802
数据处理者：

暂无
服务机构：

暂无
登记主体：

广东恒电信息科技股份有限公司
法院编号：

广州互联网法院 - 08c9c7d6e88f45f6a0989809a5a6e29f1d7b8db1fa6ecc43a9aa0108f4859633-749fc1a4;legalxchain

区块链信息

上链时间：

2026-01-19
所属区块链：

司法联盟链·广东省知识产权保护中心
证据指纹：

6b900110376b5277ee97fa7bf2845f121eb565f9e7c5de00cae36b04f9b2c1def00964fbb83f2a14c246c1b1ef3a4bcf61d1c6054958e2f07426863a692000d2
区块链存证证书编号：

LXM-GDIPI-23202601195210426321

数据信息

数据简介

本数据集是一个大规模、细粒度的异构计算平台容器资源使用记录集合。它采集自运行各类人工智能训练与推理任务的容器集群，持续记录了任务在多种异构硬件（包括多架构CPU、不同世代GPU及AI加速卡）上的实时资源消耗情况。数据集旨在为算力调度算法、性能分析与优化、资源预测及成本控制研究提供坚实的数据基础。

数据来源：

自行产生
数据所属行业分类：

I65 软件和信息技术服务业

数据处理规则说明

平台通过在宿主机部署的采集代理，从容器的cgroup文件中直接获取原始内存、CPU消耗信号，并调用NVML等接口获取gpu_memory_use，从存储驱动获取base_disk_use。这些原始数据与容器元数据（如container_name）关联后，由基于Flink的流处理引擎进行标准化：统一memory_use、gpu_memory_use、base_disk_use的单位为GiB，cpu_use的单位为核数，并对齐update_time的时间戳与采集周期。并遵循《信息技术云计算虚拟机资源管理监控》（GB/T 37739-2019）等相关标准，对异常值进行平滑与清洗。最终，洁净、结构化的记录被写入高性能时序数据库，形成完整的监控日志。全过程不涉及任何个人信息处理。

应用场景描述

本数据集主要面向云计算和人工智能基础设施领域，为智能算力调度系统的研发提供关键训练数据，帮助优化异构计算资源的分配效率。通过分析容器任务在CPU、GPU等异构硬件上的真实运行特征，系统能够精准预测资源需求，实现任务与算力的最优匹配，提升集群整体利用率。同时，数据集支持性能瓶颈诊断和能效优化研究，助力企业降低算力成本。此外，还可用于容量规划和异常检测，为云服务商的资源预留与自动扩缩容策略提供数据依据，保障大规模计算集群的稳定运行。

数据格式：

csv
数据更新频率：

实时更新
数据量：

2000

样例数据

详见数据样例附件附件下载

数据结构样例

该数据集的数据结构定义了一个用于精细监控容器资源消耗的时间序列数据集。每条记录通过唯一ID标识，并精确关联到具体的容器实例（container_name）。其核心字段直接量化了容器在某一采集时刻（update_time）对四项关键资源的实际占用：memory_use（内存，单位GiB）、cpu_use（CPU核数）、gpu_memory_use（GPU显存，单位GiB）和base_disk_use（容器层磁盘，单位GiB）。所有字段均记录“使用量绝对值”而非使用率，此设计使数据能直接用于成本计量和异常检测（如内存泄漏表现为该值持续增长）。

数据状态

2026-02-14

数据知识产权登记完成