大数据技术专题讲座(二) 第3讲 面向大数据处理的MapReduce优化技术

随着大数据时代的到来,大规模数据的处理技术研究层出不穷。MapReduce计算框架的出现,暂时缓解了大数据的处理难题。虽然MapReduce能够实现大规模数据(通常为PB级甚至EB级)的高效并行处理,但在企业应用环境中,MapReduce底层架构和处理模式上的缺陷逐渐暴露出来,造成了处理效率、执行性能上的一些瓶颈。针对这些不足,结合企业实际处理需求,产生了针对MapReduce的各个方面的优化研究。文中首先阐述了MapReduce的编程模型和实现机制,然后总结了对MapReduce作业调度、实时处理、架构和服务等方面的优化研究,最后对MapReduce各种优化技术进行了总结和展望。     

基于GPS的弹道修正弹驱动控制器系统

针对目前国内二维弹道修正处于起步阶段和一维弹道修正处于研制阶段,提出了一种基于距离及精度二次修正执行机构的驱动控制器,该驱动控制器模块是一种新型的修正组件控制模块,详细介绍了修正组件控制器的工作原理、修正原理和硬件电路设计。硬件电路设计主要包括升压电路、四路起爆电路和异或门电路。每路起爆电路可以独立控制一个阻尼片。该控制器可以完成多种模式的修正,不仅可以完成弹道修正弹的一维一次和一维二次距离修正,还可以完成弹道修正弹的二维修正。     

多约束强化学习最优智能滑翔制导方法

为提升复杂飞行任务下滑翔制导的自主性,提出一种基于最优制导与强化学习的多约束智能滑翔制导策略。引入三维最优制导以满足终端经纬度、高度以及速度倾角约束。提出基于侧向正弦机动的速度控制策略,研究考虑机动飞行的终端速度解析预测方法。针对速度控制中机动幅值无法离线确定的问题,研究基于强化学习的智能调参方法。该方法基于终端速度设计状态空间,以机动幅值设计动作空间,设计综合终端速度误差与滑翔制导任务的回报函数,采用Q-Learning实现机动幅值的智能调整。仿真结果表明,智能滑翔制导方法能够高精度满足终端多种约束,并能有效提升复杂任务下的自主决策能力。     

基于ASP．NET技术的动态网页实现

ASP .NET为Web应用系统开发提供了一种全新的灵活的基础结构,是迄今为止最先进的Web应用服务系统开发平台.动态网页是Web应用服务系统的核心.提出了采用ASP .NET技术实现动态网页的方法,在数字化油库与油库信息可视化项目研究中得到很好的应用.     

高空长航时无人机编队协同侦察任务规划

针对高空长航时无人机侦察任务规划特点,分析了高空长航时无人机执行侦察任务过程中的飞行航线约束和通信条件约束,以最小化无人机总飞行航程和最终编队飞行时间为优化目标,建立无人机编队协同侦察任务规划问题模型。同以往的通用侦察任务模型相比,该模型突出考虑了高空长航时无人机执行侦察任务过程的特点。以基本粒子群算法为基础,通过粒子群离散化和结合遗传算法进行改进,使其适用于求解复杂组合优化问题。仿真结果验证了算法求解复杂任务规划问题的有效性。     

Opening behavior of PELE perforation on reinforced concrete target

Impact velocity (v0), target strength (fc) and target thickness (hc) are important factors affecting opening damage ((D)) of PELE penetration into RC target. In this paper, based on the three influence factors of v0, fc and hc, experimental and numerical simulation studies on PELE penetration into RC target were carried out. The study results show that: (1) Since interaction force (or penetration resistance) between pro-jectile and target is positively correlated with v0 and fc, with the increase of v0 and fc, deformation mode of jacket is changed from small bending deformation to large bending deformation and then to curling deformation. Therefore, the variation of jacket deformation mode causes opening diameter of RC target to increase first and then to decrease. It is found that the two factors approximately satisfy a quadratic function relationship, respectively. (2) For PELE projectile penetrating RC targets with thickness of 80—400 mm, the opening diameter of six sets of RC targets grows from 240 to 500 mm, and hc with (D) approximately satisfy a linear relationship. (3) Based on the above study results, the relationship be-tween two dimensionless parameters (I= (mv20/d31fc) and H= hc/l ) and dimensionless opening diameter ((D)/d1) was determined. Combined with the results of previous research, a dimensionless opening diameter model (D)/d1=f1(Q,G,I)f2(H) was established. By tests verified, the test results are all within ±10％error of the theoretical model, which verifies the accuracy of the model.     

基于AKF的AUV对接回收组合导航研究

针对自主水下机器人(Autonomous Underwater Vehicle,AUV)在回收过程中的组合导航精度问题,提出了一种改进的高斯距离迭代法及改进的自适应卡尔曼滤波算法(Adaptive Kalman Filter,AKF).基于AUV回收对接系统,研究并建立了针对惯导SINS、超短基线USBL、多普勒计程仪DVL和深度计的基于斜距的组合导航模型.通过对SINS/USBL/DVL/深度计组合导航量测信息误差特性分析,设计了改进的基于斜距的SINS/USBL/DVL/深度计组合导航模型;针对该模型突出的滤波发散问题,设计了基于滤波收敛性判据和强跟踪滤波思想改进的AKF滤波算法进行有机融合.仿真结果表明,此研究使实际AUV系统具有更高的滤波精度和可靠性.     

军事指挥体系态势产品分层分类体系模型

针对我军态势产品分层分类体系的需求,基于顶层设计的思想,提出了一种多级层次多视图的态势产品分层分类体系模型.该模型充分考虑了军队指挥结构中所涉及态势产品的基本元素,并能够适应军队编制体制结构和指挥体系变化.从构建态势产品的方法论出发,利用运筹学模型建立了体系构建方法.最后,以案例研究形式探讨了建立适应于我军指挥体系的态势产品分层分类体系框架.模型的提出为指导我军建立合理、灵活、可扩展的态势产品分层分类体系提供了技术支撑,也为将来军队各类态势产品的全面发展打下基础.     

双向时空连续性轨迹片段关联的目标跟踪方法

提出一种使用双向时空连续性关联轨迹片段的目标跟踪方法.首先对检测结果进行简单的帧间匹配关联,生成可靠的轨迹片段;然后对每个轨迹片段通过卡尔曼滤波以及有权重的均值法分别计算修正轨迹片段的速度、位置与颜色特征;最后通过计算轨迹片段之间的双向时空连续性迭代关联,找到最符合时空连续性的轨迹片段关联.实验证明本文方法可以有效解决...     

S-Crowds匿名通信协议的性能研究

重路由机制是匿名通信系统的重要实现方法,文中介绍了重路由匿名通信系统的模型和Crowds系统的原理,提出了一种新型的S-Crowds协议,并对S-Crowds匿名通信系统的负载性能和匿名性能进行了详细的数学计算和理论推导,结果表明,S-Crowds系统在大幅提高系统匿名性的同时仅少量增加系统负载,是一种具有可靠匿名性的重路由协议。