基于TD3算法的人机混驾交通环境自动驾驶汽车换道研究

提高人类驾驶人的接受度是自动驾驶汽车未来的重要方向,而深度强化学习是其发展的一项关键技术。为了解决人机混驾混合交通流下的换道决策问题,利用深度强化学习算法TD3（Twin Delayed Deep Deterministic Policy Gradient）实现自动驾驶汽车的自主换道行为。首先介绍基于马尔科夫决策过程的强化学习的理论框架,其次基于来自真实工况的NGSIM数据集中的驾驶数据,通过自动驾驶模拟器NGSIM-ENV搭建单向6车道、交通拥挤程度适中的仿真场景,非自动驾驶车辆按照数据集中驾驶人行车数据行驶。针对连续动作空间下的自动驾驶换道决策,采用改进的深度强化学习算法TD3构建换道模型控制自动驾驶汽车的换道驾驶行为。在所提出的TD3换道模型中,构建决策所需周围环境及自车信息的状态空间、包含受控汽车加速度和航向角的动作空间,同时综合考虑安全性、行车效率和舒适性等因素设计强化学习的奖励函数。最终在NGSIM-ENV仿真平台上,将基于TD3算法控制的自动驾驶汽车换道行为与人类驾驶人行车数据进行比较。研究结果表明：基于TD3算法控制的车辆其平均行驶速度比人类驾驶人的平均行车速度高4.8%,在安全性以及舒适性上也有一定的提升;试验结果验证了训练完成后TD3换道模型的有效性,其能够在复杂交通环境下自主实现安全、舒适、流畅的换道行为。     

基于人-车交互的行人轨迹预测

针对行人轨迹预测具有复杂、拥挤的场景和社会交互问题,基于长短时记忆网络（Long Short-term Memory Network, LSTM）对行人与车辆、行人与其他行人的交互进行建模,提出一种基于人-车交互的行人轨迹预测模型（VP-LSTM）。该模型同时考虑了行人与行人的交互、行人与车辆的交互,更适用于复杂的交通场景。所构建的VP-LSTM包括3个输入,以行人的方向和速度作为历史轨迹序列输入,行人与行人的相对位置作为人-人交互信息输入,行人与车辆的相对位置作为人-车交互信息输入。该方法首先设计扇形人-人交互邻域和圆形人-车交互邻域来准确捕捉对被预测行人有相互作用的行人和车辆;其次建立3种不同的LSTM编码层来编码历史行人轨迹序列、人-人、人-车社交信息;然后定义人-人、人-车交互的防碰撞函数和方向注意力函数作为人-车、人-人社交信息的权重,进一步提高社会信息的精度;再将人-人、人-车交互信息输入到注意力模块中筛选出对行人影响大的社会信息;最后将筛选后的社会信息与行人历史轨迹序列一起输入到LSTM神经网络中进行行人轨迹预测,并在构建的DUT人-车交互数据集上验证提出的网络。研究结果表明：提出的方法能够准确地预测出交通场景中,人-车交互行人未来一段时间内的运动轨迹,有效提高了预测精度,提高了智能驾驶决策的准确性。     

基于启发式Q(λ)学习的铁路绝缘子定位研究

智能化冲洗是解决电气化铁路绝缘子人工冲洗弊端的有效途径,而智能化冲洗的关键在于绝缘子识别、定位。通过对现有智能冲洗设备的分析,提出一种铁路绝缘子定位、跟踪方法,该方法基于传感器信息,采用启发式Q(λ)学习算法,可快速、准确找到绝缘子。首先建立铁路绝缘子水冲洗环境模型,接着为解决传统Q(λ)学习算法盲目学习导致收敛速度慢的问题,通过搜索支柱特征调整奖赏函数,设计启发式策略函数并融入Q(λ)学习中,提高算法的学习和收敛速度。最后分别对传统Q(λ)学习算法和启发式Q(λ)学习算法进行Matlab仿真实验,确定最佳参数设置,仿真结果表明启发式Q(λ)算法的正确性和可行性。     

数字化学习平台建设与教学模式研究

当今,信息技术已渗透到经济发展和社会生活的各个方面,人们的生产、生活以及学习方式正在发生深刻的变化,全民教育、优质教育、个性化学习和终身学习已成为信息时代教育发展的重要特征。本文结合郑州铁路职业技术学院实际,对数字化学习平台建设和教学模式进行了探讨。     

全电子化计算机联锁系统RAMS设计考虑

随着计算机技术发展,计算机联锁已经成为我国铁路信号联锁系统的主要技术装备。主要对全电子化的计算机联锁系统的RAMS设计,即安全性、可靠性、可用性和可维护性设计进行分析。希望随着计算机技术和电子制造技术的发展,全电子化的计算机联锁系统会成为联锁系统的发展方向。     

奥迪车型电脑编码

随着电子技术的发展,汽车电子化日新月异,从简单的机械汽车发展到车轮上的计算机,无疑是很大的飞跃。 汽车维修技师常常遇到这样的苦恼,明明判断是该电脑失效了,但更换同一品牌、同一产地、同一型号、同一规格的电脑后,产生了其他故障——不着车,功能失效、功能不良、警报灯报警等等一系列故障,这主要是由于没有或不能正确地为相应电于控制单元(电脑)编制代码所引起的,笔者在实际工作中将相应的电子单元编码加以总结,希望能给同行提个醒。     

认识技术引进的内在规律

1问题的提出 技术引进被定义为"国际间技术转移活动中,一国从他国购入先进技术,以提高本国技术水平的活动".当代许多后发国家都把技术引进选做实现跨越式发展的捷径.     

用于水下目标识别的无监督特征选择算法

随着社会发展,海洋空间对人类变得愈发重要,对新的水下目标自动识别系统的需求也愈发迫切。在水下目标自动识别系统的构建过程中,提取到的特征含有很多冗余特征、不相关特征和噪声特征,影响系统工作效率,降低了分类识别正确率。为此,本文提出一种新的用于水下目标识别的特征选择算法——基于图学习的无监督特征选择算法(Unsupervised Feature Selection Algorithm Based on Graph Learning,UFSGL)。该算法通过同时进行转换矩阵优化和图学习来优化算法框架,并用正则化方法优化加权图中边的光滑度,最后对转换矩阵进行稀疏化从而进行特征选择。使用UCI数据库的sonar数据集对算法性能进行验证,结果证明,UFSGL算法能够有效减少特征子集中的特征个数,并在一定程度上提高分类识别正确率。     

新闻快递

综合民航水运科技快递物流公路邮政交通运输部党组中心组学习十八大精神专题研讨班开班11月21日,交通运输部党组中心组(扩大)学习贯彻党的十八大精神专题研讨班开班式暨部机关和部直属单位学习党的十八大精神辅导讲座在京举行。部党组书记、部长杨传堂主持。他强调,认真学习领会、全面贯彻落实党的十八大精神,是当前和今后一个时期的首要政治任务,也是一项长期战略任务。     

海上安全的护航者——记全国海事系统“向杨庆文同志学习活动先进个人”丁敏强

宁波港,是坐落于东海之滨的泱泱大港,船行港兴是每一个宁波海事人涌动着的心潮。万倾波涛一点红,旌旗闪耀,在弄潮人中有这样一个汉子,他不畏酷暑寒冬,以科学严谨的态度,数十年如一日地守卫着海上安全的最后一道防线,