一种模型蒸馏训练的方法，包括：第一设备蒸馏训练神经网络模型之前，要和第二设备建立蒸馏训练的通信连接，通过第一设备和第二设备之间蒸馏训练信息的交互，第二设备使用第一设备发送的第一配置信息，配置第一参考神经网络模型。第二设备配置好第一参考神经网络模型后，使用第一数据信息，将第一数据信息中的第一样本数据通过已配置好的第一参考神经网络模型进行运算处理后，得到第一指示信息，并发送给第一设备。第一设备使用第一指示信息训练其设计的第一神经网络模型。通过这种方式，实现了第二设备通过迁移“知识”来指导第一设备进行蒸馏训练。