近日,中国科学院工程热物理研究所无人飞行器实验室团队利用深度强化学习技术,开展了基于能量优化的太阳能无人机轨迹规划研究。该项研究为增强高空长航时太阳能无人机自主飞行、智能规划能力提供了新的解决思路。
高空长航时(HALE)太阳能无人机依靠取之不尽的太阳能可在临近空间停留数周或更长时间,以执行通信中继、空中侦察和灾害监控等任务。然而,受储能电池和光伏电池效率的限制,HALE无人机平台的尺寸正在不断增加以满足更多有效载荷的需求。因此,研究者正在寻找有效方法帮助无人机充分利用可获取的能量,轨迹优化作为重点方向之一,是涉及大气环境、飞行姿态和飞行任务约束的综合问题。目前,使用离线优化算法解决该类问题虽能保证解序列趋于最优化,但无法对飞行过程中的不确定性进行实时纠正以调整飞行状态;而模型预测控制、动态规划等在线算法通常采用滚动方法在有限的视界内进行优化,同时结合迭代算法进行求解,有限的算力将导致计算效率的下降。
针对以上研究背景,团队利用强化学习算法,借助神经网络实现将动态轨迹生成向端到端控制的转换,设计并建立完整的高空长航时太阳能飞机数值仿真环境以及强化学习框架(图1)。以能量最大化为目标,引入势能/电能优先策略下的不同奖励函数,经训练的神经网络控制器可自主学习充电、爬升、高空巡航、下降、低空盘旋五个阶段(图2),并针对未经重复优化的控制器开展60*24h久航仿真分析(图3)。该项研究结果表明,采用强化学习控制器的无人机经过完整昼夜飞行后,电池剩余能量得到不同程度的提高,同时控制器可以根据当前飞行和辐照信息重新预测未来的轨迹,平均单步推理仅用时1ms,进一步提升了高空长航时太阳能无人机的自主飞行能力。目前实验室正在进行基于高空多种能量的综合航迹优化进行可行性分析,下一阶段将开展相关框架的平台部署及验证工作。
相关研究成果已于《Chinese Journal of Aeronautics》发表。研究工作得到中国科学院特别研究助理项目的支持。
论文链接: https://www.sciencedirect.com/science/article/pii/S1000936121003848
图1 基于Soft Actor-Critic算法的控制器框架
(a)势能优先(b)电能优先
图2 势能/电量优先策略下的不同飞行剖面
图3 久航仿真信息分析
删除或更新信息,请邮件至freekaoyan#163.com(#换成@)
工程热物理所在高空太阳能无人机轨迹规划研究中获进展
本站小编 Free考研考试/2022-01-03
相关话题/优化 规划 综合 信息 控制
研究所在应用机器学习在光伏热电混合系统结构参数优化研究中取得进展
热电转换技术和光电转换技术是利用能源转换材料将太阳能直接转换为电能的两种主要技术形式。二者在提高太阳能利用率的技术研究发展方面的关键点,一是研究和开发高效热电材料和光伏材料及其组件,二是发展聚光型光伏热电技术。太阳能热电光电复合发电系统的核心是热电光伏复合发电单元,聚集太阳光入射后,光伏电池首先利用 ...中科院工程热物理研究所 本站小编 Free考研考试 2022-01-03研究所在多操纵面飞行器控制分配方法研究进展
为了提高飞机的机动性能和安全性能、改善控制品质,现代飞行器大多采用多操纵面布局,如美国著名的B-2战略轰炸机配置了包括开裂式阻力方向舵,升降副翼和海狸尾在内的10组操纵面;X-48B翼身融合概念无人机配置了25个独立的操纵面。大型客机如空客公司的A320操纵面总数达到33个,波音公司的B747甚至达 ...中科院工程热物理研究所 本站小编 Free考研考试 2022-01-03风电场布局优化研究进展
近期,中科院工程热物理研究所风能利用重点实验室/国家能源风电叶片研发(实验)中心在风电场布局优化方法上开展了深入研究,提出将大气稳定度作为设计阶段的重要因素,并结合高效的差分进化算法,建立了一个新型的风电场布局优化框架。通过与国外典型工作进行对比,验证了新框架优秀的布局优化效率以及大气稳定度对风电场 ...中科院工程热物理研究所 本站小编 Free考研考试 2022-01-03研究所“350MW超临界循环流化床锅炉多边形炉膛与多分离器优化布置技术”经科技成果鉴定达到国际领先水平
12月4日,由研究所和东方电气集团东方锅炉股份有限公司联合完成的“350MW超临界循环流化床锅炉多边形炉膛与多分离器优化布置技术”在北京顺利通过中国电力企业联合会组织的科技成果鉴定。来自国内循环流化床技术主要研究、开发和应用单位的专家组成的鉴定委员会认为:采用该技术的锅炉产品高效可靠、性能优良,该技 ...中科院工程热物理研究所 本站小编 Free考研考试 2022-01-03超音压气机叶栅激波/边界层干涉控制研究进展
该研究表明,局部等逆压梯度负曲率型线通过局部叶型修改获得叶栅整体气动性能收益,在利用叶栅通道主流区激波增压的同时降低激波根部诱导的边界层分离损失,并且具有一定的变工况适应性,是降低超音压气机叶型激波/边界层损失的有效气动设计方法。 提高压气机单级负荷是提高航空发动机推重比的一种重要途径,可以采用的 ...中科院工程热物理研究所 本站小编 Free考研考试 2022-01-03旋转直驱阀位置控制研究取得进展
航空发动机的燃油流量控制精度不断提高,对发动机燃油调节器的控制系统提出了越来越高的要求。由力矩马达驱动的旋转直驱阀(RDDV, Rotate Direct Drive Valve,图1)具有结构简单、抗污染能力强、可靠性高等优势,成为了燃油调节系统计量装置的研究热点。然而由于旋转直驱阀不存在限位结构 ...中科院工程热物理研究所 本站小编 Free考研考试 2022-01-03研究所在新型压气机流动控制研究方向取得新进展
研究所先进燃气轮机实验室研究团队基于自然界鲨鱼表皮流向肋片结构可有效降低流阻这一现象的启示,提出了在压气机叶片表面安装微型肋片结构以降低叶型气动损失的研究思路。相关研究成果发表在ASME Turbomachinery Technical Conference & Exposition 2020 上。 ...中科院工程热物理研究所 本站小编 Free考研考试 2022-01-03面向组网雷达干扰任务的多干扰机资源联合优化分配方法
张大琳,易伟,,孔令讲电子科技大学信息与通信工程学院成都611731基金项目:国家自然科学基金(61771110,U19B2017),****计划(B17008)详细信息作者简介:张大琳(1996–),女,山西阳泉人。现为电子科技大学信息与通信工程学院在读硕士研究生。主要研究方向为干扰系统资源自适应 ...中科院空天信息创新研究院 本站小编 Free考研考试 2022-01-03基于多元信息的多功能电磁集成超表面研究进展
许河秀1,,,王彦朝1,,王朝辉1,,彭清2,1.空军工程大学防空反导学院西安7100512.空军工程大学基础部西安710051基金项目:国防173计划(2019-JCJQ-JJ-081),陕西省自然科学基金重点项目(2020JZ-33),中国科协军事领域青年人才托举工程计划(17-JCJQ-QT- ...中科院空天信息创新研究院 本站小编 Free考研考试 2022-01-03基于智能算法的超材料快速优化设计方法研究进展
贾宇翔1,,王甲富1,,,陈维2,,随赛1,,朱瑞超1,,邱天硕1,,李勇峰1,,韩亚娟1,,屈绍波1,1.空军工程大学基础部西安7100512.93704部队北京101100基金项目:国家自然科学基金(61971435,61971341,61801509,61901508),科技部国家重点研发计划 ...中科院空天信息创新研究院 本站小编 Free考研考试 2022-01-03