一种基于Dyna-Q学习的旋翼无人机视觉伺服智能控制方法

一种基于Dyna-Q学习的旋翼无人机视觉伺服智能控制方法

论文摘要

基于图像的视觉伺服机器人控制方法通过机器人的视觉获取图像信息,然后形成基于图像信息的闭环反馈来控制机器人的合理运动.经典视觉伺服的伺服增益的选取在大多数条件下是人工赋值的,故存在鲁棒性差、收敛速度慢等问题.针对该问题,提出一种基于Dyna-Q的旋翼无人机视觉伺服智能控制方法调节伺服增益以提高其自适应性.首先,使用基于费尔曼链码的图像特征提取算法提取目标特征点;然后,使用基于图像的视觉伺服形成特征误差的闭环控制;其次,针对旋翼无人机强耦合欠驱动的动力学特性提出一种解耦的视觉伺服控制模型;最后,建立使用Dyna-Q学习调节伺服增益的强化学习模型,通过训练可以使得旋翼无人机自主选择伺服增益. Dyna-Q学习在经典的Q学习的基础上通过建立环境模型来存储经验,环境模型产生的虚拟样本可以作为学习样本来进行值函数的迭代.实验结果表明,所提出的方法相比于传统控制方法PID控制以及经典的基于图像视觉伺服方法具有收敛速度快、稳定性高的优势.

论文目录

文章来源

类型: 期刊论文

作者: 史豪斌,徐梦,刘珈妤,李继超

关键词: 视觉伺服,学习,增益调节,旋翼无人机,费尔曼连码,强化学习

来源: 控制与决策 2019年12期

年度: 2019

分类: 信息科技,工程科技Ⅱ辑

专业: 航空航天科学与工程,计算机软件及计算机应用,自动化技术

单位: 西北工业大学计算机学院

基金: 航空科学基金项目(2016ZC53022),国家重点研发计划项目(SQ2017YFGX060091),西北工业大学研究生种子基金项目(ZZ2018169)

分类号: TP391.41;TP273.5;V279

DOI: 10.13195/j.kzyjc.2018.0342

页码: 2517-2526

总页数: 10

文件大小: 1564K

下载量: 486

相关论文文献

标签:;  ;  ;  ;  ;  ;  

一种基于Dyna-Q学习的旋翼无人机视觉伺服智能控制方法
下载Doc文档

猜你喜欢