共查询到20条相似文献，搜索用时 500 毫秒
1.
2.
3.
明安图射电频谱日像仪每天产生海量观测数据,传统的关系型数据库存储和管理这些数据时,面临着读写延迟高、性能和容量扩展能力有限以及可用性弱等诸多问题。针对这些问题,开展了基于No SQL的海量数据存储与检索应用研究。首先,详细分析了明安图射电频谱日像仪的数据特点、存储需要以及面临的问题;然后,对明安图射电频谱日像仪进行数据建模,给出了明安图射电频谱日像仪的列式非关系型数据模型,同时提出了元数据和数据在No SQL中的同步存储方法,解决了二者的一致性问题,在此基础上实现了基于Cassandra的海量天文数据存储管理系统(MBDMS);最后通过实验验证了系统存储与检索的高效性、扩展性以及可行性。实验结果表明,MBDMS可以很好地满足数据管理的需要,是解决当前数据存储问题的一种有效方案。 相似文献
4.
《天文研究与技术》2015,(1)
中国新一代厘米-分米波射电日像仪(Chinese Spectral Radio Heliograph,CSRH)项目已经完成了硬件建设。为了实现从数字接收机中读取观测数据,并将最新的可用数据状态通知其他子系统如监控系统和实时展现系统等,迫切需要一个稳定可靠的数据接收子系统。针对CSRH-I的特点及要求,在分析数字接收机原始数据格式的基础上,设计并实现了CSRH-I观测数据接收子系统。系统基于Linux环境,采用Boost软件包作为底层开发库,实现了基于TCP协议的网络套接服务器,能够异步接收、过滤数字接收机发送来的数据,经过相应的分析处理后最终以文件方式存储数据,进而采用UDP报文方式通知其它子系统观测数据的更新状态。本系统充分考虑了通信过程中可能的异常情况并采取了相应的对策。测试表明,CSRH-I观测数据接收子系统工作稳定可靠,容错能力强,可以满足CSRH-I的应用需求。 相似文献
5.
中国新一代厘米-分米波射电日像仪(Chinese Spectral Radio Heliograph,CSRH)项目已经完成了硬件建设.为了实现从数字接收机中读取观测数据,并将最新的可用数据状态通知其他子系统如监控系统和实时展现系统等,迫切需要一个稳定可靠的数据接收子系统.针对CSRH-I的特点及要求,在分析数字接收机原始数据格式的基础上,设计并实现了CSRH-I观测数据接收子系统.系统基于Linux环境,采用Boost软件包作为底层开发库,实现了基于TCP协议的网络套接服务器,能够异步接收、过滤数字接收机发送来的数据,经过相应的分析处理后最终以文件方式存储数据,进而采用UDP报文方式通知其它子系统观测数据的更新状态.本系统充分考虑了通信过程中可能的异常情况并采取了相应的对策.测试表明,CSRH-I观测数据接收子系统工作稳定可靠,容错能力强,可以满足CSRH-I的应用需求. 相似文献
6.
射频干扰是射电天文观测设备无法回避的问题。国家天文台(内蒙古)明安图观测基地多台各具特色的射电观测设备、各类电磁辐射源及其传播路径共同组成了复杂的电磁环境。现有超宽带高分辨太阳射电成像观测设备——明安图射电频谱日像仪,以及即将建设的子午二期工程的太阳行星际监测系统,包括米波-十米波射电日像仪、行星际闪烁望远镜和超宽带射电频谱仪等,全部频率覆盖1 MHz～15 GHz,观测结果用于太阳物理、空间天气监测和预报的关键问题研究,也对电磁环境提出了更高要求。介绍了明安图观测基地的观测设备及其地理环境,给出了方位频率功率谱、立体方向图、时间频率功率谱等射频干扰的初步监测结果,讨论了射频干扰预防、消减及射频干扰自监测方案。 相似文献
7.
《天文研究与技术》2015,(4)
对天文望远镜的观测数据或控制过程状态进行实时的图形化显示,是天文仪器研制过程中的一个重要环节。随着Linux操作系统在天文领域的广泛应用,如何开发基于LINUX图形界面的实时图形化显示系统成为一种迫切需求。针对我国明安图超宽频射电日像仪(Mingantu Ultrawide Spectral Radio Heliograph,MUSER,原名为中国射电频谱日像仪,CSRH)实时观测数据图形化显示的要求,给出了一种利用QT架构进行实时、多屏的图形化展现方法,并以互相关与自相关数据实时展现为例进行了验证。实验表明本方法完全可以满足MUSER实时观测监控的要求,并且具有简单、快捷、可移植性好等优点,克服了LINUX下X-WINDOW编程困难等难题,对其它望远镜设计类似功能有一定的参考价值。 相似文献
8.
9.
《天文研究与技术》2017,(4)
目前天文观测中对数据的实时处理需求越来越多,性能要求也越来越高,我国明安图射电频谱日像仪(Mingant U Sp Ectral Radioheliograph,MUSER)是同时以高时间、高空间和高频率分辨率对太阳进行射电频谱成像的设备。在低频部分的日常观测中,包含了两方面的需求:(1)对历史数据的处理;(2)5秒钟抽样观测数据的处理。抽样观测数据需要实时处理,并在监控终端显示,数据处理过程包含了数据校验、修正、成图、洁化等多个步骤,传统的单机处理模式已无法满足大数据量下的实时性要求。因此,实时数据计算中,使用Spark Streaming流式计算这一新兴的分布式计算方法,设计了自定义的接收器,并将多个图形处理器节点加入到分布式集群中。通过实验对性能进行评估,结果证明基于内存的高速执行引擎的特点能显著提高性能。期待能通过实验进一步优化算法和配置,获得更好的结果,并最终运用到实际环境中。 相似文献
10.
中国新一代射电频谱日像仪——明安图射电频谱日像仪以高时间、高空间、高频率分辨率工作在0.4 GHz~15 GHz,为太阳爆发活动初始能量释放区的物理过程、太阳电子加速等研究开辟了新的窗口。高性能、高质量太阳成像算法是日像仪数据处理流水线至关重要的研究内容。参考法国墨东天文台太阳干涉阵的数据处理方法,系统讨论分析了多尺度洁化(Multi-Scale CLEAN)算法,给出了适用于日像仪的多尺度洁化算法参数,并重点讨论了算法的图形处理器并行实现。实验结果表明,改进的多尺度洁化在算法效率上比基于图形处理器实现的H9gbom CLEAN提高了近3倍,有效提高了整个数据处理流水线的性能。 相似文献
11.
12.
《天文研究与技术》2016,(3)
明安图射电频谱日像仪(Mingantu Ultrawide Sp Ectral Radioheliograph,MUSER)是新一代具有高时间、高空间、高频率分辨率的太阳专用射电望远镜,采用综合孔径原理成像,所以幅度和相位是决定最后成图质量的关键因素。天线的相位方向图会影响日像仪输出的幅度和相位,根据日像仪的馈源设计和综合孔径原理,针对明安图射电频谱日像仪天线数目多,且为户外环境,根据天文观测须经常测试天线性能的特点,给出了基于相关结果测量日像仪天线相位方向图的方法,该方法可以直接通过日像仪的相关输出结果高效准确地得到天线的相位方向图。对MUSER-I天线的相位方向图进行了测量和分析,同时分析了天线相位方向图对日像仪成像的影响,为得到高质量的太阳图像提供了参考和保障。 相似文献
13.
14.
随着快速射电暴(Fast Radio Burst, FRB)及旋转射电暂现源(Rotating Radio Transient, RRAT)等一些没有明显周期的天体被发现以来,单脉冲搜索受到研究人员广泛关注。同时随着射电望远镜设备日趋完善,更高分辨率和更广阔的观测空间产生的观测数据量剧增,观测数据的快速处理迫在眉睫。介绍了PRESTO(PulsaR Exploration and Search TOolkit)中单脉冲搜索,使用Cython编程方式对单脉冲搜索中去趋势(Detrend)算法进行优化,并通过Ray框架实现单脉冲搜索在中央处理器(Central Processing Units, CPU)上并行化。实验结果表明,算法优化后的单脉冲搜索并行化,能明显提升搜索程序性能,显著缩短数据处理时间,同时该并行策略仅基于中央处理器,无需修改代码即可在纯中央处理器环境下实现高性能数据处理。 相似文献
15.
明安图射电频谱日像仪(Mingantu Spectral Radioheliograph, MUSER)能够在0.4--15GHz超宽频带内实现高时间、高空间、高频率分辨率的太阳射电成像. 而射电亮温度是描述太阳物理过程的一个重要的参数, 在研究不同射电辐射机制、太阳磁场以及太阳爆发过程中非热粒子加速等问题上有着非常重要的作用, 因此必须对MUSER观测的图像进行亮温度定标. 将介绍一种适用于射电日像仪图像强度定标的方法. 太阳射电图像中包含着太阳圆盘的结构信息, 利用射电日像仪短基线的可视度函数拟合第一类贝塞尔函数, 可以得到图像中宁静太阳圆盘的射电半径和强度, 再利用瑞利-金斯定律和每天的太阳射电流量可以计算得到每天图像的定标因子$G_c$, 从而实现对MUSER图像强度的定标. 将该方法应用到MUSER的实际观测数据中, 包括宁静太阳和有太阳射电爆发等不同的情况, $G_c$的误差基本不超过10%, 得到的宁静太阳亮温度与其他宁静太阳的结果具有较高的相关性, 表明了此方法的可行性和有效性. 相似文献
16.
17.
随着天文技术的发展,天文数据处理软件的需求也不断更迭变化,导致软件运行环境渐趋复杂。对于开发者和使用者,急需提出一种对复杂天文数据处理软件敏捷化封装和部署的方法。我国明安图射电频谱日像仪已进入常规观测,与之配套的数据处理软件也已完成开发并投入使用。由于该软件的部署涉及操作系统环境、图形处理器运行环境及底层依赖软件等配置问题,导致安装过程既繁琐又容易出错。结合容器技术的特点,提出了一种基于Docker容器对日像仪软件系统进行敏捷封装与部署的方法,并对该方法的设计进行介绍,通过实验验证了其可用性,以及相比于传统虚拟机可获得较优异的性能表现。该方法可为未来天文数据处理软件的封装部署提供参考。可以预见,未来容器技术将成为天文海量数据处理的基础支撑技术。 相似文献
18.
我国新一代中国频谱射电日像仪（Chinese Spectral Radio Heliograph,CSRH）原始观测数据采用自定义格式,在进行后续处理与共享使用时必须转换相应的格式.在分析FITS-IDI（FITS Interferometry Data Interchange）格式的基础上,结合CSRH的实际观测模式与数据产出方式,定义与设计了符合项目情况的FITS-IDI格式及字段,并对FITS-IDI文件中若干字段的值如何获取、计算进行了深入讨论.根据定义生成的FITS-IDI文件已成功导入CASA软件,并可以进行后续处理.经过对CASA测量集文件的核实,证明了数据生成的正确性.本研究有效地推进了CSRH的建设工作,也对其他射电干涉阵数据存储有一定的参考价值. 相似文献
19.
射电观测是研究太阳活动的重要探测手段。我国明安图射电频谱日像仪(Mingant U Sp Ectral Radioheliograph,MUSER)主要用于研究太阳爆发活动初始能量释放区的物理过程,其观测将在太阳射电成像开辟一个新的窗口。成像处理是数据处理的重要组成部分,如何提高成像质量是当前数据处理的研究重点。首先介绍了射电干涉成像的基本理论,随后分析了对观测得到的可见度数据积分的必要性,细致讨论了短时段可见度数据叠加求平均和长时段UV覆盖叠加两种积分方法,并给出了完整的实现。通过实现代码与实验验证,两种积分均可以有效提高信噪比,图像质量明显提高。 相似文献
20.
叙述了太阳射电天文和太阳物理上作出过杰出贡献的几个射电日像仪的概况及其进步与发展,并简述了未来射电日像仪可以完成的科学目标以及应具有的特点,以期为在２１世纪我国实现“一颗空间Ｘ射线卫星、一座红外太阳塔和一台射电像仪”的宏伟构想提供研制依据。 相似文献