基于流式计算的云台40米脉冲星数据处理框架技术研究

来源 :昆明理工大学 | 被引量 : 0次 | 上传用户:xzyn
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
脉冲星是快速转动并不断释放脉冲信号的中子星,由于其特殊物理性质和极其稳定的周期变化,可进行高精度计时或等离子物理等方面的研究,因此对脉冲星的相关研究是现代天文学中重要内容之一。近年来基于脉冲星进行引力波、导航等新课题的研究,对脉冲星观测设备的性能提出了更高的要求。当前脉冲星观测信号接收及处理过程中,国外采用两种处理方式。一种以实时采集与处理的模式运行,但整体框架不够灵活,在后期开发过程中也存在诸多困难;另一种是基于离线文件读取的方式进行信号采集与处理,但达不到实时性的要求。在我国脉冲星观测数据处理研究中,因起步较晚,随着高吞吐率的射电天文望远镜观测设备的引进和使用,大都基于离线文件方式进行或者处在实时处理方法的探索阶段。因此高吞吐率的后端脉冲星观测设备迫切需要与之对应的数据流式处理技术的引入。虽然计算机硬件的性能在飞速发展,但是开发和维护实时的流式数据处理技术仍然是即困难且耗时的工作,严重影响到科学产出。为了解决现有国内脉冲星数据处理效率问题,本论文主要基于云南天文台40米射电望远镜脉冲星数据处理过程中先采集后处理的方式,研究现有国内外流式数据的实时处理框架技术并对射电天文脉冲星数据的实时处理框架等相关技术进行分析对比。在分析结果的基础上,设计了一个PulsarPipeline脉冲星数据处理框架,该框架由数据处理管道、实现算法的功能函数和连接功能函数的环形缓冲区三个主要组件组成,实现脉冲星数据的流式处理,之后实现该框架模型。在此基础上实现了处理ROACH2观测数据的消色散算法的各个功能组件,最终构建一个用于云南天文台40米射电望远镜脉冲星信号消色散处理的Pipeline流处理框架原型,并予以验证,实验结果表明PulsarPipeline框架在脉冲星数据处理速度上相较于现有的处理方式有一定的性能优势。本人的研究成果和创新点如下:1).在云南天文台40米射电望远镜现有的脉冲星数据处理基础上,构思PulsarPipeline脉冲星数据处理框架的设计思想,在框架整体设计上根据其实现的语言不同,分别划分为用户建模层设计和内部计算引擎设计,并进行详细设计描述;2).基于PulsarPipeline框架在CPU上实现脉冲星数据处理即消色散算法,输入编号为J0835-4510脉冲星观测数据,得到脉冲星消色散后的轮廓图,模拟云南天文台脉冲星数据处理方法进行单元测试和基于PulsarPipeline流式计算框架实现的消色散算法对不同大小的数据量进行效率对比分析;3).在PulsarPipeline流处理框架上实现的脉冲星消色散算法效率进行优化,即实现基于GPU的脉冲星数据处理消色散算法,将基于PulsarPipeline流式计算框架的CPU消色散算法和GPU消色散算法效率进行对比分析,论证PulsarPipeline脉冲星数据处理框架的优势。同时也对存在的问题及未来接下来的工作进行讨论。
其他文献
研究目的本研究采用Meta分析方法,系统评价复发性流产运用中医补肾活血法的疗效及安全性,以及统计分析补肾活血法在复发性流产的用药规律及特点,为临床治疗本病提供参考。研
本文研究了具有排斥型奇性与不定吸引型奇性的二阶微分方程周期正解的存在性问题.全文分为四章,主要安排如下:第一章分为四个小节.第一节我们介绍了奇性微分方程周期解问题的研究现状与发展趋势;第二节简要叙述了本文的主要工作;在第三节中,我们介绍Mawhin重合度拓展定理与上下解方法;最后我们给出一些常用记号.第二章我们利用Mawhin重合度拓展定理研究了一类具有排斥型奇性的Lienard方程周期正解的存在
保护、恢复和促进陆地生态系统可持续利用,可持续管理森林,防治荒漠化,制止和扭转土地退化,遏制生物多样性的丧失,一直是各个国家不断坚持的可持续发展重要目标。从国内外相
农田伴生杂草的滋生会导致农作物的产量下降,传统方法使用化学除草剂虽能有效防治杂草,但存在水土污染、农药残留、人员中毒等弊端。本文结合光学中图像处理技术,在农作物信
随着社会的发展,快速增长的城市居民交通需求与有限的交通道路资源之间的矛盾日益尖锐,大力发展公共交通是缓解城市中交通、能源和环境矛盾的关键措施。为有效实施公交优先的
霍各乞矿田位于华北板块北缘西段狼山北侧,属新元古代典型热水喷流沉积铜多金属矿床。矿区内现有三大矿床,三号为一号东延部分,平面上构成Cu→Pb、Zn→Fe分带。三号铁矿床产于狼山群二岩组透辉透闪石岩,与顶底板围岩界限截然;前人研究表明其原岩为新元古代泥质岩和灰岩。此次霍各乞三号矿床铁矿石为本次工作重点,分为磁铁矿型和磁黄铁矿-磁铁矿型,其中磁铁矿与透辉石、透闪石形成密切相关;磁铁矿分为粗晶、细微晶两
中国已成为世界制造业第一大国,制造业在国民生产总值中一直占据着很大的比重。近年来,随着“中国制造2025”的提出和实施,工业机器人正广泛应用于生产制造中。现如今制造业
工业是国家经济发展的命脉,工业生产安全、高效、可持续的运行是效益最大化的根本保障。本文在数据驱动领域开展故障诊断方法研究,从高维工业数据中提取关键特征信息,及时发
作为浮式生产储油卸油轮(FPSO)的一种定位系统,软刚臂单点系泊系统因其拥有诸多优点,在我国南海、渤海海域服役。由于其长期工作在固定海域,受到风、浪、流的联合作用下,容易
成立于上世纪90年代的SDFY集团公司,原主要产品为家用家具,随着公司转型发展,目前主要产品为彩钢板。随着近年来建材业行业竞争环境的加剧,以及自身发展存在的问题,导致SDFY