内存为中心的层次化缓存系统管理机制与性能测试数据

内存为中心的层次化缓存系统管理机制拟开发内存为中心的文件和对象数据层次化缓存系统，突破协同运行的HPC和AI应用中存在的大规模数据流动性瓶颈。建立以内存为中心的文件数据缓存空间和对象数据缓存空间，并面向文件和对象数据建立去中心化数据管理机制。该数据集主要围绕层次化缓存的数据管理机制与读写性能展开测试，具体方法为：部署缓存系统，设置Memory、SSD、远程存储三个缓存层次，通过shell脚本执行基于文件接口数据读写测试程序，以日志方式记录数据读写事件对应的缓存层次，验证层次化数据管理机制的可用性。为了保证数据的客观准确性,由北京航空航天大学软件测评实验室于2024年6月进行第三方测试时产生，测试之前对测试条件、测试环境等进行了严格的检查和测量，确保了测试的有效性和数据的准确性。

内存为中心的层次化缓存系统管理机制部署于广州超算-IO节点，在其上基于“生产者-消费者策略”调整数据存储层次，即生产者生成新鲜数据位于高层次存储设备，消费者使用该数据后，数据调整至低层次存储设备，采集的数据为以日志方式记录的数据读写事件，以及读写操作所访问的缓存设备类型信息，形成本测试数据集。

内存为中心的层次化缓存系统读写性能测试部署于东方超算-DCU节点，通过程序脚本执行基于对象接口的大规模数据读写测试程序，采集的数据为以日志方式记录的数据读写延迟时间，以及千万核规模时的理论推导数据。测试采用了程序脚本收集和软件记录运行日志数据。该数据集包含缓存系统的数据写测试源码和可执行文件、运行日志、测试结果和性能扩展性推导模型。