基于DALiuGE计算框架的w项改正算法并行优化

来源 :昆明理工大学 | 被引量 : 0次 | 上传用户:foohay
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
平方公里阵(Square Kilometre Array,SKA)将成为国际上最大的综合孔径射电望远镜,SKA作为下一代的射电望远镜,以大视场、多波束、高动态、高分辨和大数据为核心概念,将颠覆射电天文学的传统研究手段,带来全新和革命性的天文学研究理念。本文分析了SKA的总体结构设计,观测数据的获取以及采样与成像过程,以及SKA海量观测数据实时处理的特点的基础下,对基于目前SKA采用的一个分布式计算框架DALiuGE中w项改正算法的实现进行了研究,为满足SKA后续实验工作的开展。具体内容如下:1.面向SKA科学大数据的分布式处理需求,分析调研了射电干涉阵的数据获取和处理流程,对综合孔径成像原理,大视场成像w项问题进行了细致研究,对当前DALiuGE计算框架的开发方法进行了学习与实验。2.针对SKA大视场、高动态、高分辨率成像的独特要求,重点对大视场射电干涉阵成像关键技术展开了研究,对Faceting算法进行了深入的研究,实现算法并初步完成测试。3.在工作二的基础上,根据SKA科学数据处理器工作包(SDP)的要求,进一步将Faceting算法封装为DROP,在DALiuGE框架下运行实现。总体来看,本文研究并实现了基于DALiuGE计算框架的w项改正算法并行优化,为SKA的成像算法打下了较好的基础,在高性能海量数据处理流水线实现上有所创新。为SKA观测与数据处理工作提供了借鉴与参考。
其他文献
海绵城市建设是实施生态文明建设的重要措施,也是实现修复城市水生态,改善城市水环境,城市水安全等多重目标的有效手段。目前国内的理论研究和法律实践仍处于探索阶段,多个地
随着通信技术的不断发展,第五代移动通信的时代已经到来。在新的通信时代中,不仅对传统的无线移动通信网络提出的新的要求,例如频谱效率,能量效率等,也对未来的移动网络做出
硫醚类衍生物在许多天然产物中被发现是重要的结构组成单元,特别是在含有生物活性的化合物与药物中,因而有机合成专家们对合成硫醚类化合物产生了巨大的兴趣。在有机合成中,
心血管疾病是一种严重威胁人类健康的疾病。房颤是最常见的心血管疾病之一,可能引起多种并发症,其中最严重的是脑血栓栓塞,俗称中风。因此全面认识房颤的发病机理具有重要的
视觉目标跟踪是计算机视觉领域中一个重要视频研究处理分支,由于科技发展与日常生活的需求,如无人机监控、自动驾驶、人机交互、智慧交通等,近年来得以大展身手。另外,深度学
光学显微镜作为观测微观世界的有效手段,已广泛应用于生物医疗和科学研究。光学显微镜为了清晰成像,需要调整样本至成像系统的准焦面上,这个过程称之为调焦。传统显微镜调焦
随着新课程改革的深入推进,提高学生科学核心素养成为教学的核心目标。物理作为一门重要的学科,对学生物理科学核心素养培养的落实起到不可忽视的作用。而物理概念的学习是物
随着人工智能研究的兴起,人脸识别和疲劳检测技术在实际生活中应用于各行各业,为人们生活的便捷性带来了保障。当前一些重点区域如银行值班室、铁路运营室、消防监控室、重症
神经语言模型(Neural Language Model,NLM)作为自然语言处理(Natural Language Processing,NLP)领域里的基础任务,其主要目的是利用词的分布式表示,对自然语言序列建模,以克
随着无线电技术的不断发展,无线电业务不断拓宽,为人们的生产和生活提供了许多便利。与此同时,不断增加的无线电业务及日趋复杂的电磁环境为无线电频谱监测与管理带来了挑战,