共查询到20条相似文献，搜索用时 218 毫秒
1.
《天文研究与技术》2017,(4)
目前天文观测中对数据的实时处理需求越来越多,性能要求也越来越高,我国明安图射电频谱日像仪(Mingant U Sp Ectral Radioheliograph,MUSER)是同时以高时间、高空间和高频率分辨率对太阳进行射电频谱成像的设备。在低频部分的日常观测中,包含了两方面的需求:(1)对历史数据的处理;(2)5秒钟抽样观测数据的处理。抽样观测数据需要实时处理,并在监控终端显示,数据处理过程包含了数据校验、修正、成图、洁化等多个步骤,传统的单机处理模式已无法满足大数据量下的实时性要求。因此,实时数据计算中,使用Spark Streaming流式计算这一新兴的分布式计算方法,设计了自定义的接收器,并将多个图形处理器节点加入到分布式集群中。通过实验对性能进行评估,结果证明基于内存的高速执行引擎的特点能显著提高性能。期待能通过实验进一步优化算法和配置,获得更好的结果,并最终运用到实际环境中。 相似文献
2.
《天文学报》2017,(2)
天文软件开发中迫切需要在单机环境下进行高性能数据处理工作,但由于机器配置不同,采用传统的多线程、CUDA(Compute Unified Device Architecture)+GPU(Graphic Processing Unit)等方式都存在明显的局限,不利于天文软件的快速移植和无缝运行.对明安图频谱射电日像仪(MingantU SpEctral Radioheliograph,MUSER)数据处理系统开发中所采用的OpenCL(Open Computing Language)技术进行介绍,并基于OpenCL实现Hgbom CLEAN算法.整体工作通过Python语言和PyOpenCL扩展包实现并行洁化处理.实验结果表明:基于OpenCL实现的CLEAN算法与基于CUDA实现的CLEAN算法具有大致相当的运行效率,同时也可以无需修改代码直接实现纯CPU(Central Processing Unit)环境下的高性能数据处理,解决了对CUDA+GPU环境依赖的问题,在保证MUSER数据处理系统洁化过程性能的基础上,提高了系统对硬件平台的适用性.该工作验证了OpenCL在科学数据处理中的可用性,可以预见:由于OpenCL所具有的异构环境下高性能计算特性,OpenCL将是未来天文高性能软件开发的首选技术. 相似文献
3.
射电观测是研究太阳活动的重要探测手段。我国明安图射电频谱日像仪(Mingant U Sp Ectral Radioheliograph,MUSER)主要用于研究太阳爆发活动初始能量释放区的物理过程,其观测将在太阳射电成像开辟一个新的窗口。成像处理是数据处理的重要组成部分,如何提高成像质量是当前数据处理的研究重点。首先介绍了射电干涉成像的基本理论,随后分析了对观测得到的可见度数据积分的必要性,细致讨论了短时段可见度数据叠加求平均和长时段UV覆盖叠加两种积分方法,并给出了完整的实现。通过实现代码与实验验证,两种积分均可以有效提高信噪比,图像质量明显提高。 相似文献
4.
5.
天文软件开发与应用中迫切需要在单机环境下进行高性能的科学数据处理,由于机器配置不同,采用传统的CUDA+GPU技术存在明显的局限,不利于天文软件的快速移植和无缝运行。针对明安图射电频谱日像仪数据处理中的网格化(Gridding)算法,采用并行计算OpenCL技术进行多线程编程实现。实验结果表明,基于OpenCL实现的网格化算法不仅能够在图形处理器上运行,而且能够在纯中央处理器上运行。当选择在图形处理器上执行时,算法的执行效率与基于CUDA实现的网格化算法执行效率大致相当,但算法不局限于NVIDIA GPU,解决了算法对CUDA+GPU的依赖;同时算法也能在纯中央处理器上较快速地执行,适用于单机模式下进行天文软件的开发和测试,也便于天文软件的应用与推广。 相似文献
6.
7.
射频干扰是射电天文观测设备无法回避的问题。国家天文台(内蒙古)明安图观测基地多台各具特色的射电观测设备、各类电磁辐射源及其传播路径共同组成了复杂的电磁环境。现有超宽带高分辨太阳射电成像观测设备——明安图射电频谱日像仪,以及即将建设的子午二期工程的太阳行星际监测系统,包括米波-十米波射电日像仪、行星际闪烁望远镜和超宽带射电频谱仪等,全部频率覆盖1 MHz～15 GHz,观测结果用于太阳物理、空间天气监测和预报的关键问题研究,也对电磁环境提出了更高要求。介绍了明安图观测基地的观测设备及其地理环境,给出了方位频率功率谱、立体方向图、时间频率功率谱等射频干扰的初步监测结果,讨论了射频干扰预防、消减及射频干扰自监测方案。 相似文献
8.
叙述了太阳射电天文和太阳物理上作出过杰出贡献的几个射电日像仪的概况及其进步与发展,并简述了未来射电日像仪可以完成的科学目标以及应具有的特点,以期为在２１世纪我国实现“一颗空间Ｘ射线卫星、一座红外太阳塔和一台射电像仪”的宏伟构想提供研制依据。 相似文献
9.
《天文研究与技术》2016,(3)
明安图射电频谱日像仪(Mingantu Ultrawide Sp Ectral Radioheliograph,MUSER)是新一代具有高时间、高空间、高频率分辨率的太阳专用射电望远镜,采用综合孔径原理成像,所以幅度和相位是决定最后成图质量的关键因素。天线的相位方向图会影响日像仪输出的幅度和相位,根据日像仪的馈源设计和综合孔径原理,针对明安图射电频谱日像仪天线数目多,且为户外环境,根据天文观测须经常测试天线性能的特点,给出了基于相关结果测量日像仪天线相位方向图的方法,该方法可以直接通过日像仪的相关输出结果高效准确地得到天线的相位方向图。对MUSER-I天线的相位方向图进行了测量和分析,同时分析了天线相位方向图对日像仪成像的影响,为得到高质量的太阳图像提供了参考和保障。 相似文献
10.
我国新一代厘米-分米波太阳射电日像仪（Chinese Spectral Radio Heliograph,CSRH）已经进入了设备调试阶段。对数据系统的建设有迫切的要求。如何快速、可靠地实现数据的可信处理。实现一个可供调试及未来使用的数据处理系统是一项十分重要的工作。以射电天文软件包CASA为对象,分析探讨了CASA混合软件开发模式和二次开发利用的可能性,系统阐述了利用Python开发前台,后台调用C＋＋语言的混合编程方法,进而讨论分析了利用混合编程扩展CASA功能以满足太阳射电日像仪应用需求的方法。本方法具有较强的针对性．对我国其它天文新设备数据处理软件系统的开发具有一定的借鉴作用。 相似文献
11.
12.
13.
在高精度的位置计算中需要获取计算时刻所在日期的闰秒,以及UT1-UTC等关键数据,但长期以来这一类数据的维护均是手工进行,出错率高.针对新一代中国太阳射电日像仪观测与数据处理过程中的位置计算需要,实现了一个自动提取国际地球自转服务（IERS）参数的数据更新自维护子系统.系统可以根据需要自动运行、自动下载并分拆IERS网站数据,采用正则表达式从文本中自动获取所需要的实测值与预报值,自动在本地构建一个2004年12月31日以来的IERS数据库,并根据每周所获得的数据维护整个IERS的数据,将最新的实测值与预报值存入数据文件,实现了数据的滚动更新.系统彻底解决了手工维护数据的问题,为中国太阳射电日像仪的自动数据处理流水线打下了较好的基础.同时,本文提出的方法是一种通用的方法,可以方便地集成应用到国内其它天文位置计算领域. 相似文献
14.
明安图射电频谱日像仪每天产生海量观测数据,传统的关系型数据库存储和管理这些数据时,面临着读写延迟高、性能和容量扩展能力有限以及可用性弱等诸多问题。针对这些问题,开展了基于No SQL的海量数据存储与检索应用研究。首先,详细分析了明安图射电频谱日像仪的数据特点、存储需要以及面临的问题;然后,对明安图射电频谱日像仪进行数据建模,给出了明安图射电频谱日像仪的列式非关系型数据模型,同时提出了元数据和数据在No SQL中的同步存储方法,解决了二者的一致性问题,在此基础上实现了基于Cassandra的海量天文数据存储管理系统(MBDMS);最后通过实验验证了系统存储与检索的高效性、扩展性以及可行性。实验结果表明,MBDMS可以很好地满足数据管理的需要,是解决当前数据存储问题的一种有效方案。 相似文献
15.
16.
射电观测是太阳物理和日地空间科学的重要探测手段,尤其是对于太阳爆发过程中的太阳非热粒子加速、发射和传播等过程.迄今,世界各地研制建成了上百台太阳射电望远镜,包括射电流量计、射电动态频谱仪和射电日像仪等.基于技术进步和新的科学设想,人们还在不断提出新的太阳射电望远镜计划.研制新的太阳射电望远镜时,需要考虑观测频率、带宽、时间分辨率、频率分辨率、空间分辨率、偏振精度等设计参数.事实上,过度追求高参数往往会无法实现期望的科学目标.如何合理地选择太阳射电望远镜的参数呢?长期的观测研究发现太阳射电爆发常常可分成一系列从长到短不同时标的爆发过程,其中,尖峰爆发是最小时间尺度的爆发现象,同时也是太阳上目前发现的最小空间尺度上的爆发过程,可看成一种元爆发过程,可能对应于单一的磁场重联和磁能释放.根据太阳射电天文学研究,识别尖峰爆发是对新一代太阳射电望远镜的基本要求.尖峰爆发的时间尺度和空间尺度又是随频率而变化的.从分析不同频段太阳射电尖峰爆发的时间和带宽的标度律来说明如何为新一代望远镜的设计选择合理的参数指标,并提出谱-像结合观测模式,最大程度地保证望远镜科学目标的实现.这种观测模式或将成为未来太阳射电观测的主要方式,对揭示太阳爆发现象中的非热过程的物理本质具有非常重要的意义. 相似文献
17.
《天文研究与技术》2015,(2)
天文数据处理软件的开发是天文技术研究的一个重要组成部分,如何为用户提供一个直观、快捷与友好的交互界面一直是软件开发人员关注的问题。在分析了当前主流命令行界面(CLI)技术与CASA软件命令行的一些不足的基础上,结合新一代中国太阳射电日像仪(CSRH)数据处理系统开发需求,设计并实现了一套基于Python语言的CSRH CLI用户界面系统。介绍了系统的实现框架和整体流程,并重点讨论了命令行中天文数据的数据类型定义、系统权限与视图控制、系统命令匹配、补全和联机帮助等技术难点的实现,进而通过软件开发中一个实际命令说明了在命令行框架下的模块开发方法,最后给出了命令行的运行界面与操作实例。研究成果已应用于太阳射电日像仪数据处理软件的开发中,取得了良好的效果,整个系统对其它天文软件的开发有较好的参考价值。 相似文献
18.
19.
20.
《天文研究与技术》2016,(2)
中国明安图超宽频谱射电日像仪(Mingantu Ultrawide Spectral Radioheliograph,MUSER)进入实际观测后,每3 ms产生一帧100 k B左右的数据,每天的原始观测数据约3.5 TB。由于射电日像仪的原始数据采用自定义格式,为了后续数据分析和共享的需要,有必要根据数据存储需求把这些原始数据转换成天文常用的文件格式。在前期工作中已经实现了原始数据格式到UVFITS文件的转换,在此基础上研究了基于MPI的集群并行环境下UVFITS合成系统的性能优化。通过实验验证,在改进后的并行环境下,UVFITS合成系统的性能达到了需求的2.5倍,可以有效处理当前及未来一定时间内射电日像仪的海量观测数据。同时,改进后的系统具有良好的横向扩展能力,能够为相关项目的数据处理提供借鉴和参考。 相似文献