远程 THREDDS 目录的 NcML 聚合答案

【问题标题】：NcML aggregation of remote THREDDS catalog远程 THREDDS 目录的 NcML 聚合
【发布时间】：2019-01-05 03:17:45
【问题描述】：

我想聚合远程 THREDDS 目录的特定目录中的所有文件。这些是用于 nam 预测的 grib2 文件。 This 是每个月的主要目录列表。这是我的ncml 文件，用于聚合this catalog 文件：

<?xml version="1.0" encoding="UTF-8"?>
<netcdf xmlns="http://www.unidata.ucar.edu/namespaces/netcdf/ncml-2.2" >
    <aggregation dimName="time" type="joinExisting">
    <scan location="http://www.ncei.noaa.gov/thredds/dodsC/nam218/201807/20180723/" regExp="^.*\.grb2$" subdirs="false"/>
    <dimension name="time" orgName="t" />
    </aggregation>
</netcdf>

另外，我最感兴趣的是在文件中包含这两个变量：u-component_of_wind_height_above_ground 和 v-component_of_wind_height_above_ground。

我不确定 remote 目录中的上述聚合是否正确。我从上面的 ncml 文件中得到这个错误：

There are no datasets in the aggregation DatasetCollectionManager{ collectionName='http://www.ncei.noaa.gov/thredds/dodsC/nam218/201807/20180723/^.*\.grb2$' recheck=null dir=http://www.ncei.noaa.gov/thredds/dodsC/nam218/201807/20180723/ filter=^.*\.grb2$

这个ncml文件应该怎么写？

谢谢。

【问题讨论】：

标签： netcdf thredds ncml

【解决方案1】：

您可以编写一个简单的程序（我使用的是 c++）在命令提示符下使用。（我使用 Windows。）它启动一个 BAT 文件，该文件启动 wget 并下载最新的 THREDDS 目录，然后将其保存为纯文本，然后 c++ 程序将整个文件加载到一个字符串中，我在其中解析它并使用数据。

【讨论】：

感谢您的回复，但这不是问题所在。如果我想下载然后聚合，我可以简单地使用netCDF4.MFDataset（你提到的一行就可以了）。问题是使用 NCL，允许在服务器端自定义数据，在下载 TB 之前。

【解决方案2】：

您不能使用 glob 远程 URL，因此您需要向聚合提供这些 OPeNDAP 端点的列表，例如：

<dataset name="Nam218" urlPath="nam218">
  <netcdf xmlns="http://www.unidata.ucar.edu/namespaces/netcdf/ncml-2.2">
    <aggregation dimName="time" type="joinExisting">
      <netcdf location="http://www.ncei.noaa.gov/thredds/dodsC/nam218/201807/20180723/<file01>.grb2"/>
      <netcdf location="http://www.ncei.noaa.gov/thredds/dodsC/nam218/201807/20180723/<file02>.grb2"/>
      <netcdf location="http://www.ncei.noaa.gov/thredds/dodsC/nam218/201807/20180723/<file03>.grb2"/>
    </aggregation>
  </netcdf>
</dataset>

【讨论】：