five

FAST-FREX|天文学数据集|射电天文学数据集

收藏
github2024-11-14 更新2024-11-28 收录
天文学
射电天文学
下载链接:
https://github.com/zhejianglab/RaSPDAM
下载链接
链接失效反馈
资源简介:
FAST-FREX数据集基于五百米口径球面射电望远镜(FAST)的观测结果构建,包含600个正样本(来自三个源的观测FRB信号)和1000个负样本(噪声和射频干扰)。
创建时间:
2024-11-06
原始信息汇总

RaSPDAM 数据集概述

数据集介绍

RaSPDAM 是一个基于视觉形态特征的机器学习算法,专门用于快速射电暴(FRB)的检测。该算法旨在解决传统FRB搜索方法在计算和时间上的挑战,提供显著的效率和准确性改进。

数据集背景

快速射电暴(FRB)是从遥远星系发出的短暂而强烈的射电能量脉冲。它们的发现和研究对于理解宇宙中物质的分布和演化至关重要。然而,由于射电望远镜产生的大量数据和现有搜索方法的计算复杂性,FRB的检测是一项具有挑战性的任务。传统技术在检测弱信号方面往往表现不佳,且耗时较长。

数据集内容

RaSPDAM的测试基于FAST-FREX数据集,该数据集建立在五百米口径球面射电望远镜(FAST)的观测基础上。数据集包含:

  • 600个正样本:来自三个源(FRB20121102、FRB20180301和FRB20201124)的观测FRB信号。
  • 1000个负样本:噪声和射频干扰(RFI)。

关键特性

效率和准确性

  • 高精度:RaSPDAM的精度达到98.73%,显著优于传统方法如PRESTO和Heimdall。
  • 高召回率:召回率为77.67%,有效识别出大部分真实的FRB信号。
  • F1分数:F1分数为0.8694,表明在精度和召回率之间取得了良好的平衡。

多功能性

  • 目前RaSPDAM提供到达时间(ToA)作为结果,未来的增强将包括色散量(DM),以进行更全面的信号验证。

性能基准

与传统方法的比较:

软件 TN TP FN FP 召回率 精度 F1分数
PRESTO 3 472 0 26963700 0.7867 1.7505E-05 3.5009E-05
Heimdall 218 489 36 5854 0.8150 0.0771 0.1409
RaSPDAM 989 466 128 6 0.7767 0.9873 0.8694

发现

自部署以来,RaSPDAM在识别以下方面发挥了重要作用:

  • 2个新的FRB:FRB20211103A和FRB20230104。
  • 80个脉冲星:包括13个先前未发现的脉冲星,突显了该算法在发现新天体方面的有效性。
AI搜集汇总
数据集介绍
main_image_url
构建方式
FAST-FREX数据集的构建基于五百万米口径球面射电望远镜(FAST)的观测数据,旨在为快速射电暴(FRB)的检测算法提供训练和测试样本。该数据集包含600个正样本,这些样本来自三个已知的FRB源(FRB20121102、FRB20180301和FRB20201124),以及1000个负样本,主要由噪声和射频干扰(RFI)组成。通过将原始信号序列转换为标准化图像,并应用卷积和形态学膨胀等预处理技术,数据集确保了模型输入的高质量和高一致性。
特点
FAST-FREX数据集的主要特点在于其高精度和高召回率。RaSPDAM算法在该数据集上的表现显著优于传统的检测方法,如PRESTO和Heimdall,实现了98.73%的精确率和77.67%的召回率,F1得分为0.8694。此外,数据集的多样性体现在其包含的FRB信号和噪声样本的广泛性,为算法提供了全面的测试环境。未来,数据集的扩展还将包括时间到达(ToA)和色散测量(DM)等参数,以进一步提升信号验证的全面性。
使用方法
使用FAST-FREX数据集时,首先需安装必要的依赖库,可通过运行'pip install -r requirements.txt'命令完成。随后,通过执行'python raspdam.py <fits_file>'脚本,用户可以处理指定的FITS文件。可选参数包括模型路径、输出路径以及各种阈值设置,如sigmoid激活函数的阈值、边界框填充阈值和投影阈值,这些参数可根据具体需求进行调整。通过这些步骤,用户能够高效地利用FAST-FREX数据集进行快速射电暴的检测和分析。
背景与挑战
背景概述
FAST-FREX数据集是由中国五百米口径球面射电望远镜(FAST)观测数据构建而成,旨在支持快速射电暴(FRB)检测算法的研究。该数据集包含600个正样本,涵盖来自三个不同源的FRB信号,以及1000个负样本,主要由噪声和射频干扰(RFI)组成。FAST-FREX的创建旨在解决传统FRB搜索方法在处理大量数据时的计算复杂性和时间消耗问题,为机器学习算法如RaSPDAM提供了宝贵的测试资源。RaSPDAM算法基于视觉形态特征,显著提升了FRB检测的效率和准确性,对理解宇宙中物质的分布和演化具有重要意义。
当前挑战
FAST-FREX数据集在构建和应用过程中面临多项挑战。首先,FRB信号的短暂性和强度变化使得信号增强和特征提取成为关键难题。其次,数据集中噪声和RFI的存在增加了模型训练的复杂性,要求算法具备高精度的噪声过滤能力。此外,尽管RaSPDAM在效率和准确性上表现优异,但其对计算资源的高需求仍是一个待解决的问题。未来,扩展算法功能以包括色散测量(DM)等更多信号验证参数,也是提升FRB检测全面性的重要方向。
常用场景
经典使用场景
FAST-FREX数据集在快速射电暴(FRB)检测中展现了其经典应用场景。该数据集通过整合来自五百米口径球面射电望远镜(FAST)的观测数据,提供了600个正样本和1000个负样本,用于训练和测试基于视觉形态特征的单脉冲检测算法(RaSPDAM)。RaSPDAM利用U-Net架构的卷积神经网络,从预处理后的图像中提取特征,并通过形态学膨胀和卷积增强信号,最终实现高效且准确的FRB检测。
衍生相关工作
FAST-FREX数据集的推出催生了多项相关研究工作。基于该数据集,研究人员开发了多种改进的FRB检测算法,如结合深度学习和传统信号处理技术的混合模型。此外,该数据集还促进了跨学科合作,推动了机器学习在射电天文学中的应用,为未来的天文数据处理和分析提供了新的思路和方法。
数据集最近研究
最新研究方向
在快速射电暴(FRBs)检测领域,FAST-FREX数据集的最新研究方向主要集中在提升算法的效率与精度。RaSPDAM算法通过引入基于视觉形态特征的机器学习方法,显著改善了传统检测方法在处理大量数据时的计算复杂性和时间消耗问题。该算法不仅在精度上达到了98.73%的高水平,还在召回率和F1分数上表现出色,有效平衡了精确度和召回率之间的权衡。此外,RaSPDAM的部署已成功识别出多个新的FRB和脉冲星,进一步验证了其在天文学研究中的实际应用价值。未来研究可能聚焦于扩展算法的应用范围,包括引入色散测量(DM)以进行更全面的信号验证,从而为理解宇宙物质分布和演化提供更丰富的数据支持。
以上内容由AI搜集并总结生成
用户留言
有没有相关的论文或文献参考?
这个数据集是基于什么背景创建的?
数据集的作者是谁?
能帮我联系到这个数据集的作者吗?
这个数据集如何下载?
点击留言
数据主题
具身智能
数据集  4098个
机构  8个
大模型
数据集  439个
机构  10个
无人机
数据集  37个
机构  6个
指令微调
数据集  36个
机构  6个
蛋白质结构
数据集  50个
机构  8个
空间智能
数据集  21个
机构  5个
5,000+
优质数据集
54 个
任务类型
进入经典数据集
热门数据集

Beijing Traffic

The Beijing Traffic Dataset collects traffic speeds at 5-minute granularity for 3126 roadway segments in Beijing between 2022/05/12 and 2022/07/25.

Papers with Code 收录

Stanford Cars

Cars数据集包含196类汽车的16,185图像。数据被分成8,144训练图像和8,041测试图像,其中每个类被大致分成50-50。类别通常在品牌,型号,年份,例如2012特斯拉Model S或2012 BMW M3 coupe的级别。

OpenDataLab 收录

典型分布式光伏出力预测数据集

光伏电站出力数据每5分钟从电站机房监控系统获取;气象实测数据从气象站获取,气象站建于电站30号箱变附近,每5分钟将采集的数据通过光纤传输到机房;数值天气预报数据利用中国电科院新能源气象应用机房的WRF业务系统(包括30TF计算刀片机、250TB并行存储)进行中尺度模式计算后输出预报产品,每日8点前通过反向隔离装置推送到电站内网预测系统。

国家基础学科公共科学数据中心 收录

LFW (Labeled Faces in the Wild)

Labeled Faces in the Wild,是一个人脸照片数据库,旨在研究无约束的人脸识别问题。该数据集包含从网络收集的超过 13,000 张人脸图像。每张脸都标有图中人物的名字。照片中的 1680 人在数据集中有两张或更多张不同的照片。这些人脸的唯一限制是它们是由 Viola-Jones 人脸检测器检测到的。更多细节可以在下面的技术报告中找到。

OpenDataLab 收录

Pew Research Center Surveys

Pew Research Center Surveys 包含多个社会科学领域的调查数据,涵盖政治、社会、科技、宗教等多个主题。这些调查数据通常用于分析公众意见、态度和行为。

www.pewresearch.org 收录