金属矿山

作者：刘锦瑶谢丽蓉卞一帆安毅,杨志勇,黄德启

单位：1. 新疆大学电气工程学院,新疆 乌鲁木齐 830017;2. 大连理工大学控制科学与工程学院,辽宁 大连 116024;3. 新疆天池能源有限责任公司,新疆 昌吉 831100;4. 新疆露天矿智能生产与管控重点实验室,新疆 昌吉 831100

基金：新疆重点研发专项项目(编号:2023B01006);自治区重点实验室基金资助项目(编号:XJQY2007)。

为解决自动驾驶矿用卡车在矿山复杂环境下易失去对先前策略适应能力的难题,提出了一种考虑样本重训练的深度强化学习车道保持控制算法。首先,通过考虑目标网络更新参数的特性,推导出一种周期性经验抽取重训练模型,将重训练回合间隔纳入到传统目标网络更新参数模型中。然后,为避免噪声对模型的影响,将经验回放缓冲区设置在较小的抽样范围内,噪声和不相关的经验对模型的影响会被降低,增强极端运行条件下的系统鲁棒性。最后,考虑到露天矿山典型十字形道路,在CARLA 中设定车辆位置于十字路口,采用固定回合数下得到的平均奖励作为模拟的关键性能指标进行仿真试验。试验结果表明,提出的周期性重训练深度Q 网络(PR-DQN)策略有效减少了训练过程中的波动,使模型更快收敛,有效提升模型在非平稳环境任务中的性能,在稳定性和泛化能力上表现出显著优势。

来源：2025年第10期

《金属矿山》期刊编辑部

查看金属矿山杂志2025年第10期