共查询到20条相似文献,搜索用时 15 毫秒
1.
Obstacle avoidance becomes a very challenging task for an autonomous underwater vehicle(AUV) in an unknown underwater environment during exploration process. Successful control in such case may be achieved using the model-based classical control techniques like PID and MPC but it required an accurate mathematical model of AUV and may fail due to parametric uncertainties, disturbance, or plant model mismatch. On the other hand, model-free reinforcement learning(RL) algorithm can be designed using actual behavior of AUV plant in an unknown environment and the learned control may not get affected by model uncertainties like a classical control approach. Unlike model-based control model-free RL based controller does not require to manually tune controller with the changing environment. A standard RL based one-step Q-learning based control can be utilized for obstacle avoidance but it has tendency to explore all possible actions at given state which may increase number of collision.Hence a modified Q-learning based control approach is proposed to deal with these problems in unknown environment.Furthermore, function approximation is utilized using neural network(NN) to overcome the continuous states and large statespace problems which arise in RL-based controller design. The proposed modified Q-learning algorithm is validated using MATLAB simulations by comparing it with standard Q-learning algorithm for single obstacle avoidance. Also, the same algorithm is utilized to deal with multiple obstacle avoidance problems. 相似文献
2.
3.
4.
5.
在船舶避碰多Agent决策支持系统(SCA-MADSS)平台上,开发一个基于多Agent通信的船舶避碰协商决策模型,从而为解决船舶避碰问题提供了一种新的方法。在Speech Act理论的基础上设计了Agent间的通信原语及其状态转移图,并根据实际避让操作需要确定了通信格式和通信关键字。基于Agent通信机制和多Agent规划方法,设计了一个以互利为目标,以合作为形式,以协商为手段的船舶避碰决策模型及其规划算法。试验结果表明该模型可以有效地减少避让过程中的不协调性,所获得的避让方案更为合理与经济。 相似文献
6.
通过对交叉相遇局面中单拖网渔船避碰行为的实际调查,应用信息熵理论,建立了避碰行为的不确定性模型。借助对交叉相遇局面中的让路船在不同距离、不同DCPA时采取避碰行动的不确定性分析,为相应局面中的船舶避碰决策提供参考。 相似文献
7.
介绍了一种运用了专家系统和动作空间搜索的避碰系统。运用模糊理论来推论碰撞危险度,通过A搜索算法设计避碰行为。船舶动作空间搜索算法源于运用了船舶航行规范的专家系统。通过ECDIS中的人机界面及数学仿真结果,证明了采用专家机制的避碰系统可以采取更合理的行动。 相似文献
8.
9.
考虑到多船避碰的影响因素众多,除考虑周围船舶的态势外,还需考虑风流等自然因素的影响,以及避碰规则的种种制约,为此,分析多船的会遇局面以及避碰的机理,充分考虑影响避碰的各个因素,运用静态非完全信息的博弈论建立多船避碰决策的数学模型. 相似文献
10.
11.
12.
交叉相遇局面中船舶避碰行动的不确定性 总被引:1,自引:1,他引:0
通过对船员避碰行动调查,根据信息熵理论研究评价了在交叉相遇局面中让路船舶两船间初始DCPA和距离采取避碰行动种类的不确定性,并与在接近对遇局面的相应情况进行了比较,为处于相应局面船舶的避碰决策提供参考。 相似文献
13.
针对船舶避碰决策行为差异,提出一种运用前景理论求取最佳船舶避碰决策方案的优化方法。在分析避碰行为个体差异的基础上,运用前景理论和多指标灰关联决策相结合的方法,构建考虑驾驶员风险态度的船舶避碰方案选择决策优化模型,以船舶碰撞危险度、航程损失和轨迹平稳性作为决策指标,研究在同一会遇场景下驾驶员不同风险态度的最优避碰方案并进行对比分析。研究结果表明:该模型可优化船舶驾驶员在不同风险偏好下的最优避碰方案选择,将前景理论运用到船舶避碰决策优化中是可行且有效的,能为船舶避碰决策和决策拟人化提供支持。 相似文献
14.
为了提高舰船航行的安全和效率,达到最佳操船效果,需要建立舰船自动智能避碰数字模型.当前模型在分析舰船避碰风险度的基础上,通过人工智能、进化计算和软计算等方法实现舰船自动智能避碰,存在避碰识别准确率较低的问题.本文提出一种新的舰船自动智能避碰数学模型,首先对舰船会遇态势进行判断;然后建立预测舰船碰撞风险判断模型,预测本舰船实施自动智能避碰方案后的复航时机是否已到,以及本舰船立即复航是否能够让清目标舰船或其他所有目标舰船;最后依据舰船碰撞风险判断结果,以当前舰船潜在碰撞风险为例,建立舰船自动智能避碰数学模型.仿真结果证明,所提模型能够实现舰船自动智能避碰. 相似文献
15.
16.
17.
研究如何拓展ARPA在航海领域的应用,设计一种操作简单且直观的为操纵者提供船舶当前态势,并能实时为操纵者提供避碰决策的雷达避碰算法,对船舶操纵者保证航行安全,有重要的意义。介绍了罗盘坐标系与笛卡尔坐标系转换的算法,设计了基于避碰解析几何的态势标绘算法和避碰标绘算法。 相似文献
18.
限制水域是船舶会遇率较高的水域,也是事故多发水域。在对限制水域船舶避让的法律条款适用问题和碰撞事故原因分析的基础上,提出限制水域船舶会遇构成追越、对遇和交叉等态势下的避让责任的划分,特别讨论了限制水域端部的会遇船舶的避让责任问题。最后,对限制水域船舶避让行动提出了戒备、航行与避让、声号信号与通信、航行值班、操纵与应急操作等方面的要求。 相似文献
19.
船舶自动避碰方法的研究 总被引:20,自引:5,他引:15
本文提出了利用框架式专家系统与数理分析相结合的仿人智能避碰方法,经过计算机仿真表明,实现了海域无约束船舶避碰方案的自动编制,为船舶自动避碰系统的研究迈开了可喜的一步 相似文献