基于强化学习与安全约束的自动驾驶决策方法

在自动驾驶决策场景下,为解决强化学习算法安全性差、学习效率低的问题,提出一种在算法的训练阶段添加基于价值的安全约束和虚拟奖励的方法。首先,利用状态、动作价值函数和安全判断规则,对智能体执行的动作进行基于价值的安全约束,选择价值高且安全的动作。然后,向回放池添加包含虚拟奖励的预测轨迹数据,以补充由于约束而未能获取的试错动作信息和相应的状态、奖励信息。最后,为进行加减速和换道决策实验,基于修改后的高速公路仿真环境highway-env搭建了3车道高速公路场景,并以深度Q网络（Deep Q Network, DQN）算法为基础,分别训练和测试了无安全约束的算法、拥有基于规则的安全约束的算法和拥有基于价值的安全约束的算法。结果表明,考虑加速、减速、保持车速和车道、向左换道、向右换道共5种动作时,基于价值的安全约束算法的成功率比无安全约束的算法高3倍以上,平均回报提升28%;仅考虑向左换道、向右换道、保持车道这3种换道动作时,基于价值的安全约束算法的成功率比基于规则的安全约束算法高0.11,平均回报提升6%;都添加基于价值的安全约束时,考虑5种动作的算法相较于考虑3种动作的算法成功率低0.06但...     

现代奥运史话·连载(三)

温布利体育场上被迫举行了一届拮据的奥运会。伦敦的大部分街区已在二战中被德军炸弹夷为平地,而且还推行了配给制。 范妮·布兰克尔斯——科恩曾代表荷兰参加柏林奥运会。1948年,30岁的她已经是一位母亲,但她在德国占领期间坚持日常训练,并作为7项世界纪录保持者,参加了伦敦奥运会。[第一段]     

驾驶人安全意识体验式训练装置研究

通过对目前常用驾驶人安全意识培训方法的对比,认为体验式培训为最适合的培训方法;进一步对我国2007-2010年间大型道路交通事故特征进行分析,得出驾乘人员不系安全带是引起人员伤亡一大原因。通过设计研发碰撞、翻转两个体验式训练装置,使驾乘人员在保证安全的前提下真切感受道路交通事故发生瞬间安全带对人体的保护作用,有效提高驾驶人的安全意识,减少道路交通事故的发生及人员的伤亡。     

加强研究生德育素质培养的对策

通过对新时期加强研究生德育素质培养的重要性和必要性的认识，分析当前研究生素质教育面临的新形势和新问题，并提出加强研究生德育素质培养的对策。     

基于Kubernetes的铁路客运营销深度学习平台的设计与实现

为解决铁路客运营销深度学习平台Tensorflow框架存在的环境配置复杂,资源利用率低、模型设计周期长等问题,提出了基于Kubernetes容器的PaaS平台构建TensorFlow容器的统一资源调度管理及API访问控制服务架构.经平台实践证明,该架构为客运营销提供了可靠、稳定的分析环境,降低了模型的训练难度,提高了模...     

简讯

<正>交通公安部署开展"重点场所、重点问题"消防安全专项整治行动为认真贯彻落实党的十八大和十八届三中、四中全会精神,深刻汲取近期重特大火灾事故教训,深化港航消防安全"防火墙"工程建设,推进交通公安消防工作进一步"融于交通、服务交通",继续保持火灾隐患排查整治的高压态势,深入打造港航消防安全防控治理体系,确保交通港航系统运输生产平安稳定,自4月20日起至10月10日,交通运输部公安局在港航公安系统部署开展"重点场所、重点问题"消防安全专项整治行动。     

海员的基本素质

针对21世纪航运形式的迅速发展,航海科学技术日新月异的变化,论述了新世纪海员为适应形势发展的需要,应具备的创新意识、责任意识、竞争意识、安全和环保意识以及同舟共济的协作意识等素质。     

舰艇仿真训练系统开发中三维旋转效果的二维实现

在开发舰艇仿真训练系统中,为提高操作界面的逼真程度,经常要求实现元件的三维旋转效果。文章介绍了传统的二维坐标换算和旋转三维模型方法的局限和缺点,提出了通过替换页面关系和循环引擎,在二维开发环境中实现三维旋转的效果。此方法简化了程序流程,缩短了开发周期,在舰艇模拟仿真训练系统开发过程中有着良好的表现和广泛的应用趋势。     

基于HLA的电子对抗训练效果评估系统建设技术研究

军事技术的发展,使得作战样式趋向于高技术条件下多兵种联合作战,对军事训练技术提出了更高的要求,将高层体系结构（HLA）引入训练系统设计是一个必然趋势。针对电子对抗部队训练效果评估的实际需求,基于高层体系结构（HLA）的技术特点,提出了基于HLA的电子对抗训练效果评估系统的体系结构。文章以专业训练评估成员中的雷达对抗评估为例,进行了仿真对象模型设计,应用软件实现分析,阐述了基于HLA系统开发的基本过程,对基于HLA的军事应用系统设计有一定的借鉴意义。     

提高中国海员素质刻不容缓

在不到一个月的时间里,与中国海员相关的重大海难事故就有三起。富城号挪威搁浅,造成重大海域污染;立善轮马来西亚海域被撞,造成船舶起火,9名船员失踪;昌盈轮台湾避台风时失踪,22名中国船员失踪。三起事故,造成了重大的人员伤亡及环境污染。这三艘船舶中只有两名中国台湾船员,其余均是大陆船员,并都是大陆船长。从这三宗海难中可以透析出中国海员的素质提高刻不容缓。