Parameter details

本节介绍了所有模型中可由用户定义的参数，可以分为必要参数和高级参数两类。必要参数需要用户指定，高级参数采用了默认值，用户可以在 json 文件中根据需求手动修改。在下面的参数中，"相对路径（relative path）" 表示相对于当前工作目录的路径，而 "绝对路径（absolute path）" 表示从根目录开始的文件或目录的完整路径。

必要参数

对于任何模型，以下参数需要用户输入。

model_type

该参数用于指定用于训练的模型类型。您可以使用LINEAR模型、NN模型、DP模型或 NEP 模型。

atom_type

该参数用于设置训练体系的元素类型。用户可以按照任意顺序指定元素的原子序数。例如，对于单元素系统如铜，可以设置为 [29]，而对于多元素系统如 CH4，则可以设置为 [1, 6]。您也可以使用元素类型的名称，例如["Cu"] 或者 ["H", "C"]。

max_neigh_num

最大邻居数，其默认值为100。然而，对于某些系统来说，这个值可能不足以容纳所有的邻居，导致特征生成失败。在这种情况下，将会弹出以下警告信息：

Error! maxNeighborNum too small

在该情况下，请调大该值。

raw_files

该参数用于指定训练任务的分子动力学轨迹文件所在的路径。您可以使用相对路径或绝对路径。

• 对于 DP 和 NEP 模型，支持的文件格式有 PWmat, VASP, CP2K (对应 format 参数为 pwmat/movement, vasp/outcar, cp2k/md)
• 对于 LINEAR 和 NN 模型，仅支持pwmat/movement格式

format

该与 raw_files 配合使用，参数用于指定原始轨迹文件的格式，默认值为 pwmat/movement。 PWmat, VASP, CP2K 对应 format 参数分别为 pwmat/movement, vasp/outcar, cp2k/md。

datasets_path

该参数用于 DP 和 NEP 模型，用于指定 pwmlff/npy 格式的数据所在路径。对于 DP 和 NEP 模型，如果指定了raw_files，在训练或者测试中会把raw_files中的轨迹自动转换为pwmlff/npy格式。转换工具为 PWDATA。

train_movement_file

该参数在PWMLFF-2025.5之前的版本中，用于 LINEAR 和 NN 模型做训练，提供 movement 文件路径。当前版本（2024.5）已经修改为raw_files，并且兼容该参数，即您可以使用train_movement_file 或者 raw_files 皆可。

test_movement_file

该参数在PWMLFF-2025.5之前的版本中，用于 LINEAR 和 NN 模型做测试，提供 movement 文件路径。当前版本（2024.5）已经修改为raw_files，并且兼容该参数，即您可以使用test_movement_file 或者 raw_files 皆可。

model_load_file

该参数用于指定用于测试任务的模型所在的路径。

高级参数

用户只需要设置必要参数即可完成模型的训练、测试和相关分子动力学过程。相应的高级参数，如模型超参数和优化器超参数，将被设置为默认值。这些高级参数也可以在 json 文件中进行设置。

train_valid_ratio

该参数指定训练集与验证集的比例。例如，0.8 表示将 MOVEMENT 中前 80% 的 images 作为训练集，剩余的 20% 作为验证集。默认值为 0.8。

recover_train

该参数用于从中断的 DP 或 NN 训练任务中恢复训练。默认值为 true

work_dir

该参数用于设置执行训练、测试和其他任务的工作目录。它可以设置为绝对路径或相对路径。默认值是相对路径./work_dir。

reserve_work_dir

该参数用于指定在任务执行完成后是否保留工作目录 work_dir。默认值为 False，意味着在执行完成后该目录将被删除。

信息

1. 注意，work_dir，reserve_work_dir, train_movement_file 和 test_movement_file 参数仅用于 LINEAR 和 NN 模型。并且 LINEAR 和 NN 模型仅支持 movement 文件格式。train_movement_file 和 test_movement_file 参数在 PWMLFF-2024.5 版本中，已经被 raw_files替换，同时也兼容该参数。

type_embedding

"model_type"="DP" 时，在model参数中设置"type_embedding":true表示用 type embedding 训练 DP 模型，默认值为false。

model 参数

完整的 DP 模型包括 描述符（descriptor）、拟合网络（fitting_net） 和 type_embedding 三个部分；NN不包含type_embedding; 对于 Linear 模型，则不需要指定拟合网络和优化器。对于 NEP 模型参数需要单独设置。

Linear model

Linear 模型的完整参数设置如下：

    "model": {
        "descriptor": {
            "Rmax": 6.0,
            "Rmin": 0.5,
            "feature_type": [3,4]
        }
    }

Rmax

特征的最大截断半径。默认值为 $6.0 \text{\AA}$。

Rmin

特征的最小截断半径。默认值为 $0.5 \text{\AA}$。

eature_type

该参数用于特征类型，与NN 模型中的设置相同。支持的选项有[1, 2]、[3, 4]、[5]、[6]、[7]和[8]。默认值为[3, 4]，即 2-b 和 3-b 高斯特征。有关不同特征类型的更详细信息，请参考附录1。

NN model

NN 模型的完整参数设置如下：

    "model": {
        "descriptor": {
            "Rmax": 6.0,
            "Rmin": 0.5,
            "feature_type": [3,4]
        },
        "fitting_net": {
            "network_size": [15,15,1]
        }
    }

Rmax

特征的最大截断半径。默认值为 $6.0 \text{\AA}$。

Rmin

特征的最小截断半径。默认值为 $0.5 \text{\AA}$。

feature_type

该参数用于特征类型。支持的选项有[1, 2]、[3, 4]、[5]、[6]、[7]和[8]。默认值为[3, 4]，即 2-b 和 3-b 高斯特征。有关不同特征类型的更详细信息，请参考附录1。

network_size

该参数用于拟合网络（fitting_net）的结构。默认值为[15, 15, 1]，其结构如下所示： 输入层（输入数据维度）➡ 隐藏层 1（15 个神经元）➡ 隐藏层 2（15 个神经元）➡ 输出层（1 个神经元）

DP model

DP 模型的完整参数设置如下：

    "model": {
        "type_embedding":{
            "physical_property":["atomic_number", "atom_mass", "atom_radius", "molar_vol", "melting_point", "boiling_point", "electron_affin", "pauling"]
        },
        "descriptor": {
            "Rmax": 6.0,
            "Rmin": 0.5,
            "M2": 16,
            "network_size": [25,25,25]
        },
        "fitting_net": {
            "network_size": [50,50,50,1]
        }
    }

physical_property

该参数用于指定 DP 模型在做 type embedding 方式训练时需要的参数，我们这里提供了 8 个物理属性供用户选择。

atomic_number: 原子序数 atom_mass: 原子质量 atom_radius: 原子半径 molar_vol: 摩尔体积 melting_point: 熔点 boiling_point: 沸点 electron_affin: 电子亲和能 pauling 为泡林电负性

"physical_property" 默认值为 ["atomic_number", "atom_radius", "atom_mass", "electron_affin", "pauling"]

Rmax

DP 模型中平滑函数的最大截断半径。默认值为 $6.0 \text{\AA}$。

Rmin

DP 模型中平滑函数的最小截断半径。默认值为 $0.5 \text{\AA}$。

M2

该参数用于 DP 模型中的网络，确定嵌入网络的输出大小和拟合网络的输入大小。在示例中，嵌入网络的输出大小为(25 X 16)，拟合网络的输入大小为(25 X 16 = 400)。默认值为 16。

network_size

该参数用于嵌入网络（embedding_net）和拟合网络（fitting_net）的结构。默认值分别为[25, 25, 25]和[50, 50, 50, 1]。对应的网络结构如下所示：

嵌入网络的结构： 输入层（输入数据维度）➡ 隐藏层 1（25 个神经元）➡ 隐藏层 2（25 个神经元）➡ 输出层 3（25 个神经元）

拟合网络的结构： 输入层（M2 X 25）➡ 隐藏层 1（50 个神经元）➡ 隐藏层 2（50 个神经元）➡ 隐藏层 3（50 个神经元）➡ 输出层（1 个神经元）

NEP model

完整的 NEP 模型参数设置如下：

{
    "model_type": "NEP",
    "atom_type": [8,72],
    "max_neigh_num": 100,
    "model": {
        "descriptor": {
            "cutoff": [6.0,6.0],
            "n_max": [4,4],
            "basis_size": [12,12],
            "l_max": [4,2,1],
            "zbl": 2.0
        },
        "fitting_net": {
            "network_size": [100,1]
        }
    }
}

model_type

该参数用于指定NEP训练的类型。

cutoff

该参数用于设置 radial 和 angular 的截断能，在PWMLFF的实现中，我们只使用了 radial 的截断能，角度的截断能与 radial 一致。默认值为 [6.0, 6.0]。

n_max

该参数用于设置 radial 和 angular的距离和角度分别对应的 feature 数量，默认值为 [4, 4]。

basis_size

该参数用于设置 radial 和 angular的距离和角度分别对应的基组数量，默认值为 [12, 12]。

l_max

该参数用于设置 angular 的展开阶，同时控制是否使用四体和五体feature，默认值为 [4, 2, 1]，分别是三体、四体以及五体 feature 对应的阶。这里 2表示使用四体 feature，1 表示使用五体feature。如果您只使用三体feature，请设置为[4, 0, 0]；只是用三体和四体feature，请设置为[4, 2, 0]。

network_size

该参数用于设置 NEP 模型中隐藏层神经元个数，在 NEP 模型中只有一层隐藏层，默认值为 [100]。这里支持使用多层神经网络，如您可以设置为[50, 50, 50, 1]这类网络，但是建议您使用默认值即可，更多网络层数在我们的测试中对模型拟合精度的提升有限，反而会造成推理负担，降低推理速度。

zbl

该参数用于设置Ziegler-Biersack-Littmark (ZBL) 势，处理原子距离非常近的情况。默认不设置。该值的允许范围是 1.0 $\le$ zbl $\le$ 2.5。

optimizer 优化器

可用于训练 NN、DP、NEP 模型的优化器，有KF（Kalman Filter）优化器和ADAM 优化器。

KF optimizer

KF 优化器的完整参数设置如下：

    "optimizer": {
        "optimizer": "LKF",
        "epochs": 30,
        "batch_size": 1,
        "print_freq": 10,
        "block_size": 5120,
        "p0_weight": 0.01,
        "kalman_lambda": 0.98,
        "kalman_nue": 0.9987,
        "train_energy": true,
        "train_force": true,
        "train_ei": false,
        "train_virial": false,
        "train_egroup": false,
        "pre_fac_force": 2.0,
        "pre_fac_etot": 1.0,
        "pre_fac_ei": 1.0,
        "pre_fac_virial": 1.0,
        "pre_fac_egroup": 0.1
    }

optimizer

该参数用于指定优化器名称，可用选项有LKF或GKF。关于优化器的详细信息参考 LKF，其中提供了有关优化器实现和特性的更深入的细节说明。

epochs

该参数用于指定训练的轮数（epochs）。在机器学习中，一个 epoch 指的是整个训练数据集通过神经网络的完整传递，包括前向传播和反向传播。在每个 epoch 中，训练数据集分为多个 小批量（mini-batches） 样本，之后把每个批次输入到神经网络，进行前向传播、损失计算和参数更新的反向传播过程。训练的轮数决定了整个训练数据集在训练过程中被处理的次数。默认值为 30。

通常需要通过调试和评估训练过程来选择适当的训练轮数。如果训练轮数过小，模型可能无法充分学习数据集的模式和特征，导致欠拟合。另一方面，如果训练轮数过大，模型可能会过拟合训练数据，在新数据上的泛化性能下降。

batch_size

批大小（batch size）参数确定了在每个 epoch 的训练过程中，每个小批量（mini-batch）中包含的训练样本数量。默认值为 1。

print_freq

该参数用于指定没经过多少个小批量迭代之后打印一次训练误差。默认值为 10。

block_size

该参数是LKF 优化器的超参数，用于指定协方差矩阵 P 的块大小。较大的块大小会增加内存和 GPU 内存的消耗，导致训练速度较慢，而较小的块大小会影响收敛速度和准确性。默认值为 5120，如果是在 A100、H100 等高端显卡上，建议设置为 10240。

p0_weight

该参数是 LKF 和 GKF 优化器的超参数，用于正则化参数，默认值为0.01，即采用正则化。设置正则化项有助于减少模型的过拟合。该参数要求值小于 1 ，经过测试 0.01 是较为合适的值。如果设置为 1 则表示使用正则化。

kalman_lambda

该参数是LKF 和 GKF 优化器的超参数，称为记忆因子（memory factor）。它决定了对先前数据的权重或关注程度。值越大，越重视先前的数据。默认值为 0.98。

kalman_nue

该参数是LKF 和 GKF 优化器的超参数，kalman_nue 是遗忘率（forgetting rate），描述了 kalman_lambda 变化的速率。默认值为 0.9987。

train_energy

该参数用于指定是否训练 total energy，默认值为 true。

train_force

该参数用于指定是否训练 force，默认值为 true。

train_ei

该参数用于指定是否训练 atomic energy，默认值为 false。

train_virial

该参数用于指定是否训练 virial，默认值为 false。

train_egroup

该参数用于指定是否训练 energy group，默认值为 false。

pre_fac_etot

该参数用于指定 total energy 对损失函数的权重或贡献。默认值为 1.0。

pre_fac_force

该参数用于指定 force 对损失函数的权重或贡献。默认值为 2.0。

pre_fac_ei

该参数用于指定 atomic energy 对损失函数的权重或贡献。默认值为 1.0。

pre_fac_virial

该参数用于指定 virial 对损失函数的权重或贡献。默认值为 1.0。

pre_fac_egroup

该参数用于指定 energy group 对损失函数的权重或贡献。默认值为 0.1。

ADAM optimizer

ADAM 优化器的完整参数设置如下:

    "optimizer": {
        "optimizer": "ADAM",
        "epochs": 30,
        "batch_size": 1,
        "print_freq": 10,
        "lambda_2" : 0.1,
        "learning_rate": 0.001,
        "stop_lr": 3.51e-08,
        "stop_step": 1000000,
        "decay_step": 5000,
        "train_energy": true,
        "train_force": true,
        "train_ei": false,
        "train_virial": false,
        "train_egroup": false,
        "start_pre_fac_force": 1000,
        "start_pre_fac_etot": 0.02,
        "start_pre_fac_ei": 0.1,
        "start_pre_fac_virial": 50.0,
        "start_pre_fac_egroup": 0.02,
        "end_pre_fac_force": 1.0,
        "end_pre_fac_etot": 1.0,
        "end_pre_fac_ei": 2.0,
        "end_pre_fac_virial": 1.0,
        "end_pre_fac_egroup": 1.0
    }

optimizer, epochs, batch_size, print_freq, train_energy, train_force, train_ei, train_virial, train_egroup. 这些参数与 KF 优化器中的参数功能相同。

lambda_2

该参数用于设置 Adam 优化器的 L2 正则化项，默认不设置。设置正则化项有助于减少模型的过拟合。

learning_rate

该参数是 Adam 优化器的初始学习率。默认值为 0.001。

stop_lr

该参数是指停止学习率，表示当学习率降到该值时训练过程将停止。默认值为 3.51e-08。

stop_step

该参数是指停止步数（stopping step），表示当达到该步数时训练过程将停止。默认值为 1000000。

decay_step

该参数表示衰减步数（decay step），它指定了学习率衰减的间隔。在每个衰减步数之后，学习率会根据一定的衰减率进行更新。默认值为 5000。

learning_rate, stop_lr, stop_step, decay_step 这四个变量用于更新学习率，其计算过程如下所示，可以使用以下的 Python 代码或数学公式表示：

decay_rate = np.exp(np.log(stop_lr/learning_rate) / (stop_step/decay_step))
real_lr = learning_rate * np.power(decay_rate, (iter_num//decay_step))

首先计算衰减率（decay_rate）：

$$\text{decay\_rate} = \exp\left(\frac{\log(\text{stop\_lr}/\text{start\_lr})}{\text{stop\_step}/\text{decay\_step}}\right)$$

更新学习率 learning rate：

$$\text{real\_lr} = \text{start\_lr} \cdot \left(\mathrm{decay\_rate}\right)^{\left(\left\lfloor\frac{\text{iter\_num}}{\text{decay\_step}}\right\rfloor\right)}$$

其中，iter_num 代表训练过程中的迭代次数。

start_pre_fac_force

训练开始时 force 损失的 prefactor，应大于或等于 0。默认值为 1000。

start_pre_fac_etot

训练开始时 total energy 损失的 prefactor，应大于或等于 0。默认值为 0.02。

start_pre_fac_ei

训练开始时 atomic energy 损失的 prefactor，应大于或等于 0。默认值为 0.1。

start_pre_fac_virial

训练开始时 virial 损失的 prefactor，应大于或等于 0。默认值为 50.0。

start_pre_fac_egroup

训练开始时 egroup 损失的 prefactor，应大于或等于 0。默认值为 0.02。

end_pre_fac_force

训练结束时 force 损失的 prefactor，应大于或等于 0。默认值为 1.0。

end_pre_fac_etot

训练结束时 total energy 损失的 prefactor，应大于或等于 0。默认值为 1.0。

end_pre_fac_ei

训练结束时 atomic energy 损失的 prefactor，应大于或等于 0。默认值为 2.0。

end_pre_fac_virial

训练结束时 virial 损失的 prefactor，应大于或等于 0。默认值为 1.0。

end_pre_fac_egroup

训练结束时 egroup 损失的 prefactor，应大于或等于 0。默认值为 1.0。