apache Science Data Analytics Platform (SDAP)

SDAP是一个NASA资助的科学数据分析平台,专为地球物理海洋学研究设计。它结合了多个组件,如NEXUS(用于大规模数据分析)、Solr(元数据索引)、Cassandra(数据存储)和MUDROD(提高数据发现和访问)。NEXUS通过分块存储和按需加载数据支持高效分析,而MUDROD则增强了海洋数据的发现能力。
摘要由CSDN通过智能技术生成

科学数据分析平台(Science Data Analytics Platform,SDAP)

什么是SDAP

SDAP是一个技术软件解决方案,旨在更好地使科学家参与推进地球物理海洋学的研究。
该平台是NASA之前资助的几个使用云技术的海洋数据解决方案的组合,包括:

  • data analysis (NEXUS)
  • anomaly detection (OceanXtremes)
  • matchup (DOMS)
  • subsetting
  • discovery (MUDROD)
  • visualization (VQSS)

数据分析(NEXUS)

NEXUS是一个数据密集型的分析解决方案,它使用一种新的方法来处理科学数据,从而支持大规模的数据分析。NEXUS采用的方法是将原始数据拆分成小块存储。每个tile的元数据存储在一个快速可搜索索引中,索引中有一个指向原始数据数组的指针。当需要进行分析时,将在索引中查找必要的tile,然后只加载那些tile的数据进行处理。支持多种算法:

  • 时间序列
  • 纬度/时间Hovmoller
  • 经度/时间Hovmoller
  • 纬度/经度时间平均
  • 面积平均时间序列
  • 时间平均图
  • 气候地图
  • 相关图
  • 每日平均差异

Solr

Solr用来存储tile的元数据

Cassandra

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值