铁路路基状态检测中探地雷达数据并行处理

为快速处理探地雷达检测铁路路基状态所产生的大量检测数据,缩短检测报告的生成周期,采用并行计算技术设计并构建适用于探地雷达数据解析的并行处理平台,利用计算机集群处理解析探地雷达数据;基于服务器计算能力的动态探地雷达数据任务负载均衡算法,对用户提交的探地雷达数据解析任务统一调度分发。采用实际的铁路路基状态检测雷达数据对构建的并行处理平台进行实验,分析雷达数据并行处理的准确性、时间消耗、并行化加速比和系统可扩展性等指标。结果表明:在8个节点的集群并行处理平台上进行探地雷达数据的处理效率比用单机版软件提高553%,处理时间比基于Hadoop的探地雷达数据并行处理方法缩短50%以上。     

基于数据仓库的铁路供电调度监控海量信息容错存储新方法

提出一种基于Hadoop云计算技术的电气化铁路供电调度监控海量数据的容错存储新方法,将铁路供电调度监控数据冗余存储在构建于分布式文件系统(HDFS)上的数据仓库Hive中,可实现海量供电调度监控信息的冗余备份存储,且Hive提供的HiveQL语句可以执行数据查询和数据变换等操作,便于辅助决策。搭建基于Hadoop平台的电气化铁路供电调度监控数据仓库,实验结果表明,新方法在供电调度监控海量信息存储及数据冗余备份方面具有优良性能,能满足电气化铁路海量供电调度监控信息的容错存储。     

基于动态资源调度算法的数据中心负载均衡方案研究

云数据中心大多采用静态调度算法对虚拟化资源进行分配和调度,调度一旦完成,若无维护,资源分配状况一般不会发生变化,但随着资源池的持续使用,资源使用不均衡的问题会越来越严重.针对该问题,提出基于动态资源调度(DRS,Dynamic Resource Scheduler)算法的负载均衡解决方案,使数据中心物理节点上的资源使用...     

基于负载均衡的MVB周期数据调度优化

针对采用单调速率(RM)调度算法构建的周期扫描表易导致多功能车辆总线(MVB)网络出现负载不均衡的问题,基于MVB网络建立以网络负载不均衡度最小为目标的优化模型;为增加算法的收敛速度,简化算法求解过程,采用基于以平均负载率为中心的预测域的免疫遗传算法对优化模型进行全局最优求解。仿真和试验结果表明:较RM调度算法和其他优化算法,采用所给出的优化模型和算法能够明显减小MVB网络负载的波动;算法具有更快的收敛速度,可以提高MVB网络的负载能力,提升控制系统的性能。     

集群排队的铁道供电海量准实时数据异步并行查询

针对铁道供电的海量准实时数据查询效率不高造成信息处理效率低下的问题,提出一种基于集群队列模型的铁道供电监控海量信息快速异步并行查询新方法。基于实时Ajax数据引擎,综合运用MPP查询架构,建立供电监控信息的轮询队列模型,实现海量准实时数据在铁道供电监控系统中的快速查询处理。以四机集群和一台查询测试机为平台,以铁道10kV配电网远动调度监控千万级时序数据为算例,进行加载测试和集群查询性能测试。结果表明:MPP结合Ajax异步回调机制,集群磁盘I/O的读取速度约为存储速度的10倍,能够将查询服务器端的交互更新降至数百毫秒级,验证了新的集群监控方法优于常规双数据库服务器并列运行的模式。     

LVS集群技术在数字化校园的应用研究

Linux在各个领域都得到了广泛的应用。基于Linux构建应用服务器,已成为当今的主流。本文通过分析LVS集群中的相关技术,从负载调度、高可用性、动态可扩展性三个方面对LVS技术在数字化校园中的应用进行了研究。     

探地雷达铁路检测大数据多线程并行处理方法北大核心

为了提升探地雷达(Ground Penetrating Radar,GPR)数据信号处理算法的性能,建立了一种适用于单机模式的多线程并行处理方法。分析了GPR信号处理算法的并行性特征,对文件头和数据道分离存储以支撑任意道集的细粒度数据划分,采用简便的静态调度实现并行任务调度。对5种常用算法进行了串并行对比试验。结果表明:复杂度较高的算法更适宜进行并行化改造,加速比约为硬件环境物理核数,线程数可根据物理核数和CPU线程数进行优选。当数据量变化时,算法的并行加速比保持稳定,表现出良好的适应性。     

基于Hadoop的Aprior算法改进及其在动车组运维的应用

论文着眼于解决大数据下的动车组关联规则挖掘问题，提出了一种基于Apriori算法改进的大数据关联规则挖掘算法T-MR-Apriori算法。该算法融合Hadoop技术，执行两遍MR分布式计算过程，完成整个关联规则挖掘流程，提高了海量数据下关联规则挖掘的效率和准确率。同时利用实际动车组运维数据进行验证，证明该算法在海量数据下具有良好的挖掘速度又能不降低挖掘性能。并且将该方法应用于动车组牵引电机运维数据挖掘，进行可视化展示。     

基于工作站集群关联规则分布式算法的性能评价

主要叙述2种基于工作站集群WS Cluster环境的分布式并行处理的有效性算法。第一种算法是在WS间的关系数据比较小的表算法。另一种算法是对数据通信应用转换操作和对独立数据每接点进行大量搜索过程的简化,并对这些算法在WS Cluster的实施和对它的性能评价。     

关联规则分布式算法的性能评价

主要叙述两种基于WS Cluster(WSs即工作站集群)环境的分布式并行处理的有效性算法.第1种算法是在WSs间的关系数据比较小的表算法.另一种算法是对数据通信应用转换操作和对独立数据每接点进行大量搜索过程的简化,通过这些算法在WSs中的实施,并对它们的性能作出评价.     

适用于自组织多重组播网络的均衡算法研究

在分析自组织网络自身特点的基础上,介绍一种多组播业务并存的多重组播网络,该网络相对传统的组播网络具有节省系统开销,降低能量消耗的优点,尤其适于铁路通信的应用.文中对多重组播网络中的节点连接度的不同变化情况进行了研究,并在充分考虑移动节点的实际通信能力基础上设计了一种适用于多重组播网络的负载均衡路由算法.算法非常适用于本文所提出的多重组播网络环境,与其它组播协议相比,能够在动态环境下以较高的成功率建立组播树,保持较高的数据包发送成功率.同时,该算法引入负载均衡机制后有效的平衡了各节点之间的负荷,消除了节点载荷突发的现象.仿真结果表明,该路由算法负载均衡性能良好,并能显著提高组播业务的稳定性.文章结尾对今后的研究工作进行了总结和展望.     

基于发布订阅的铁道供电报警信息流计算集群技术

为解决从铁道配电网监控的海量动态信息中快速筛选和及时处理实时报警信息的问题,提出一种基于发布订阅的铁道供电报警信息的流计算集群处理技术。通过发布订阅方式接入铁道配电网监测数据,结合流计算模式的拓扑并行模型,综合运用多主题消息分类及分区消息缓存技巧,实现报警信息的低延迟和高吞吐量处理。以铁路10kV动车段配电网调度监控的实测数据为算例,对工程中采集的监测数据进行多机集群测试。结果表明:基于发布订阅的流集群方法可获得数百ms级报警数据平均处理延时,且分布式消息队列的主题分区数并非设置的越大越好,通过对拓扑组件中并行线程数的优化设置,可以有效提高铁道配电网报警信息的实时响应性能和吞吐率。     

适用于全IP移动通信系统的比例资源调度算法

未来的全IP移动通信系统能够提供多种不同QoS要求的业务,资源调度对保证QoS和提高资源利用效率起关键作用。动态规划方法可以求解满足QoS保证的最优调度,但是它对运算速度和存储容量要求很高,难以在实际中应用。为此本文提出一种比例资源调度算法,将QoS保证映射为接纳控制阶段的比例资源分配。由于信道的相关特性已经在接纳控制阶段进行了考虑,而且资源分配比例是时不变的,因此将动态规划问题简化为线性规划问题。文中采用吞吐量最大化调度作为比较基准,仿真了比例资源调度算法的性能,结果表明:由动态规划转化为线性规划带来的性能损失很小;另外当平均信噪比较小时,调度增益较大,并且调度增益随用户数的增加而增大。     

基于Hadoop的自动售票日志分析系统设计

通过对自动售票系统日志数据分析,不仅能了解系统的运行状况,还能在日常维护中更容易地发现问题,降低维护成本,提高维护的效率.针对这一目的,本文基于Hadoop框架设计一个自动售票系统的日志分析系统,搭建Hadoop集群环境,并对处于不同自动售票应用服务器上的日志进行收集,针对自动售票系统日志的特点,编写Map/Reduce算法,对收集到的日志进行分析处理,使其结果满足需求,同时,验证基于Hadoop的自动售票日志分析系统的有效性及可行性.     

三级建库ORACLE实时应用群集

以三级建库所使用的ORACLE9I为例,重点介绍ORACLE9I的实时应用集群(Oracle Real Application Cluster,简称RAC)的数据库组件、参数文件配置,对RAC数据库的负载均衡及故障转移作了探讨,并对运行数据库性能提出一些测试方法.     

大规模数据并发环境下视频监控系统的研究与实现

城市轨道交通综合监控系统中的视频监控子系统与多个业务子系统共处同一个网络环境中,具有大规模数据并发特点。首先,介绍视频监控子系统所采取的策略,然后介绍基于订阅分发模型的视频数据规划,最后,重点研究视频分发过程中的负载均衡技术。在多台服务器工作的条件下,根据服务器的性能和负载等因素,提出一种基于动态测量的负载均衡技术,实验证明,该负载均衡技术可以有效地降低时延,提高系统的吞吐量,并均衡各个服务器的负载,取得良好的效果。     

基于Windows的Weblogic集群配置及应用安全策略

介绍一种基于Weblogic的负载均衡集群配置方案,以及针对业务特点和安全原则进行的安全策略方案的制定.应用于服务器上,将负载分给多个服务器分担,能够解决CPU或I/O的高负载问题.     

一起数据库服务器故障引发调度命令模块异常的处理

针对南宁铁路局Oracle数据库服务器A机无法对外提供服务但网络连接是正常状态,同时服务器B机未能正常接管RAC集群服务故障的具体现象,对原因及处理方法进行阐述;最终将VOTEDISK(表决盘)数量增加为奇数,并将Oracle客户端由顺序选择连接模式调整为负载均衡模式,使故障得以消除。对Oracle数据库类似故障处理具有一定参考意义。     

桥梁健康监测系统中的大数据分析与研究

由于分布在桥梁上的传感器长时间连续地采集数据,传输的数据量非常大,传统的桥梁健康监测系统不能够完全应对海量监测数据,为此,提出了一种基于K线图时间片驱动的滑动窗口数据流处理模型,对传感器网络中的数据流进行快速有效地采集,并且能够减少桥梁监测的数据存储量。基于单一服务器节点的索力统计评估系统,在分析海量数据时存在计算瓶颈,利用集群的分布式并行计算,提出了基于Map/Reduce的索力并行处理模型,实验结果表明,在该模型下处理索力监测历史大数据,可以明显减少专家系统的分析评估时间。     

席位自动负载均衡在客票系统的研究和应用

席位自动负载均衡是一种对客票系统资源进行共享,对客票席位进行自动均衡分配的方法,将全路各个地区中心大量网络连接的服务器、存储、数据库等计算资源进行统一管理,形成一个庞大的资源为客票席位提供智能测算和动态调整的服务。本文主要介绍席位自动负载均衡的概念、特点、关键技术及其在客票系统中的研究与应用。