pdenneval

<p align="center"> <strong> <span style="font-size: 30px;">pdenneval</span> </strong> </p> ## 数据集介绍 PDENNEval 数据集用于发表于 IJCAI 2024 的论文 [《PDENNEval: A Comprehensive Evaluation of Neural Network Methods for Solving PDEs》](https://www.ijcai.org/proceedings/2024/573) 中的神经网络偏微分方程求解方法评测。PDENNEval 对函数学习和算子学习两类共 12 种神经网络方法进行了系统比较，评测问题覆盖流体、材料、金融和电磁等多个科学领域。 ## 仓库说明 本标准化数据仓库整理了 PDENNEval 评测使用的完整数据集，可作为 OneScience/PDENNEval 模型的预检、训练和评测输入。仓库共收录 9 个 PDEBench 数据文件和 6 个 PDENNEval 自生成数据文件，覆盖 15 类 PDE 任务；仓库同时提供 HDF5 数据模式、文件大小与 SHA256 清单、源数据完整性对照结果以及自动校验脚本，便于 ModelScope 下载、OneScience 自动运行和数据完整性检查。 ## 文件说明 | 路径 | 功能 | 备注 | |---|---|---| | `README.md` | 数据集仓库使用说明 | 介绍数据来源、仓库内容、数据格式、下载与校验方法 | | `metadata/pdenneval_schema.json` | PDENNEval 数据模式说明 | 记录各 HDF5/H5 文件的 PDE 类型、属性、字段、shape、dtype 和适配配置 | | `data/` | 完整 PDENNEval 数据目录 | 包含 9 个 PDEBench 数据文件和 6 个 PDENNEval 自生成数据文件，预计约 286.9 GB | | `scripts/validate_pdenneval_dataset.py` | 数据集校验脚本 | 检查文件完整性、HDF5 可读性、字段、维数、dtype、样例值和文件大小；支持可选 SHA256 校验 | | `files_sha256.jsonl` | 文件校验清单 | 记录全部 HDF5/H5 数据文件的路径、字节数和 SHA256 | | `data_integrity_summary.json` | 数据完整性汇总 | 记录源数据与标准化数据的文件名、大小和 SHA256 对照结果 | ## 数据格式 数据文件统一采用 HDF5 格式，文件扩展名为 `.hdf5` 或 `.h5`。 ### PDEBench 数据 | 路径 | 格式 | 主要内容 | |---|---|---| | `data/1D_Advection_Sols_beta0.1.hdf5` | HDF5 | 1D Advection 标量时空解场及坐标 | | `data/ReacDiff_Nu0.5_Rho1.0.hdf5` | HDF5 | 1D Diffusion-Reaction 时空解场及坐标 | | `data/1D_Burgers_Sols_Nu0.001.hdf5` | HDF5 | 1D Burgers 标量时空解场及坐标 | | `data/1D_diff-sorp_NA_NA.h5` | HDF5 | 1D Diffusion-Sorption 时空解场及坐标 | | `data/1D_CFD_Rand_Eta0.1_Zeta0.1_periodic_Train.hdf5` | HDF5 | 1D Compressible Navier-Stokes 的密度、压力、速度等流场及坐标 | | `data/2D_CFD_Rand_M0.1_Eta0.1_Zeta0.1_periodic_128_Train.hdf5` | HDF5 | 2D Compressible Navier-Stokes 的密度、压力、速度分量等流场及坐标 | | `data/2D_DarcyFlow_beta1.0_Train.hdf5` | HDF5 | 2D Darcy Flow 系数场、稳态解场及空间坐标 | | `data/2D_rdb_NA_NA.h5` | HDF5 | 2D Shallow Water 时空解场及坐标 | | `data/3D_CFD_Rand_M1.0_Eta1e-08_Zeta1e-08_periodic_Train.hdf5` | HDF5 | 3D Compressible Navier-Stokes 的密度、压力、速度分量等流场及坐标 | ### 自生成数据 | 路径 | 格式 | 主要内容 | |---|---|---| | `data/1D_Allen-Cahn_0.0001_5.hdf5` | HDF5 | 1D Allen-Cahn 相场时空解及坐标 | | `data/1D_Cahn-Hilliard_10e-6_0.01.hdf5` | HDF5 | 1D Cahn-Hilliard 相场时空解及坐标 | | `data/2D_Allen-Cahn_0.0001_1.hdf5` | HDF5 | 2D Allen-Cahn 相场时空解及坐标 | | `data/2D_Black-Scholes-Barenblatt_r0.05_sigma0.4.hdf5` | HDF5 | 2D Black-Scholes-Barenblatt 金融 PDE 解场及坐标 | | `data/3D_CFD_rand_M1.0_periodic_Train.hdf5` | HDF5 | 3D Euler 的密度、压力、速度分量等流场及坐标 | | `data/3D_Maxwell_10_1.h5` | HDF5 | 3D Maxwell 电磁场分量及空间、时间坐标 | ## 使用说明 本数据集适配 `OneScience/PDENNEval` 模型。PDENNEval运行时可通过模型包脚本把本仓库的数据组织到模型运行目录。 - 文件与下载： ```bash modelscope download --dataset OneScience/pdenneval --local_dir ./pdenneval modelscope download --model OneScience/PDENNEval --local_dir ./PDENNEval ``` - 数据验证 ```bash python scripts/validate_pdenneval_dataset.py ``` 完整 SHA256 校验可执行 `python scripts/validate_pdenneval_dataset.py --full-hash`。 ## OneScience 官方信息 | 平台 | OneScience 主仓库 | Skills 仓库 | |---|---|---| | Gitee | https://gitee.com/onescience-ai/onescience | https://gitee.com/onescience-ai/oneskills | | GitHub | https://github.com/onescience-ai/OneScience | https://github.com/onescience-ai/oneskills | ## 引用与许可证 - PDENNEval 原始论文：[PDENNEval: A Comprehensive Evaluation of Neural Network Methods for Solving PDEs](https://doi.org/10.24963/ijcai.2024/573) - PDEBench 原始论文：[PDEBench: An Extensive Benchmark for Scientific Machine Learning](https://arxiv.org/abs/2210.07182) - PDEBench 数据集：[PDEBench Datasets，DaRUS，DOI: 10.18419/darus-2986](https://doi.org/10.18419/darus-2986) - 本仓库保留来源说明，并面向 OneScience ModelScope 自动运行场景进行整理；公开分发前请根据上游项目确认许可证要求。