Aktionen

NetCDF: Unterschied zwischen den Versionen

Aus BAWiki

imported>Lang Guenther
(→‎Allgemeines: Abschnitt über Hilfsmethoden und Chunking ergänzt)
imported>Lang Guenther
(→‎Wichtige NetCDF Hilfsmethoden: Link to NCGEN3 added)
Zeile 20: Zeile 20:


Die wichtigsten Hilfsmethoden der NetCDF ''Utilities'' sind:
Die wichtigsten Hilfsmethoden der NetCDF ''Utilities'' sind:
* [https://www.unidata.ucar.edu/software/netcdf/docs/netcdf/ncdump.html#ncdump NCDUMP] Inhalt einer NetCDF Datei als Text (selektiv) ausgeben; und
* [https://www.unidata.ucar.edu/software/netcdf/docs/netcdf/ncdump.html#ncdump NCDUMP] Inhalt einer NetCDF Datei als Text (selektiv) ausgeben;  
* [https://www.unidata.ucar.edu/software/netcdf/docs/netcdf/nccopy.html NCCOPY] Inhalt einer NetCDF Datei selektiv kopieren, Kompressionsniveau abwandeln, innere Struktur der Datei (''File Chunking'') abwandeln.
* [https://www.unidata.ucar.edu/software/netcdf/docs/netcdf/nccopy.html NCCOPY] Inhalt einer NetCDF Datei selektiv kopieren, Kompressionsniveau abwandeln, innere Struktur der Datei (''File Chunking'') abwandeln; und
* [https://www.unidata.ucar.edu/software/netcdf/docs/netcdf/ncgen3.html#ncgen3 NCGEN3] erzeugt eine NetCDF Datei aus einer CDL Textdatei; optional kann auch C oder FORTRAN Code automatisch damit erzeugt werden.


==File Chunking==
==File Chunking==

Version vom 25. August 2014, 08:40 Uhr

Allgemeines

Zielsetzung dieser BAWiki-Seiten

Dieser Bereich des BAWiki enthält alle NetCDF-Konventionen, die zur Speicherung typischer BAW-spezifischer Daten in NetCDF-Dateien (siehe network common data form) erforderlich sind. Insbesondere werden auch alle lokalen Konventionen aufgeführt, die über die international vereinbarte CF-Metadaten-Konvention hinausgehen. Diese BAWiki-Plattform dient daher auch als Diskussionsforum zur Abstimmmung der zusätzlich erforderlichen Konventionen.

In allen Fällen, in denen die CF-Konventionen unzueichend sind, sollte zunächst geprüft werden, ob die Erweiterungen mit Deltares-Konventionen beschrieben werden können oder nicht - ggf. in Abstimmung mit Deltares die Deltares-Konventionen erweitern. Die als Standard vorgeschlagene Version befindet sich auf dem GITHUB. Weitere Aktivitäten im Umfeld von OpenDAP zur Selektion von Daten auf unstrukturierten Netzen findet man z. B. auf OPULS.

Weitere nützliche Mustervorlagen zur Verwendung insbesondere der globalen Attribute sind bei den NODC NetCDF Templates zu finden. Es ist vorgesehen, insbesondere die globalen Attribute Schritt für Schritt in die BAW Softwareumgebung zu integrieren.

Die zusätzlich benutzen Konventionen sollen in dem globalen NetCDF-Attribut Conventions z. B. wie folgt beschrieben werden:

// global attributes:
:Conventions = "CF-1.6" .

Die seit 2010 entwickelte BAW-Ausprägung einer NetCDF-Datei wird als Datei des Typs CF-NETCDF.NC bezeichnet.

Seit Version NetCDF-4.0 wird HDF (Hierarchical Data File, siehe HDF5 Group) als darunter liegendes Dateiformat verwendet. Damit werden Konzepte wie Online-Kompression der gelesenen/geschriebenen Daten sowie das File Chunking auch bei Verwendung der NetCDF API unterstützt.

Wichtige NetCDF Hilfsmethoden

Die wichtigsten Hilfsmethoden der NetCDF Utilities sind:

  • NCDUMP Inhalt einer NetCDF Datei als Text (selektiv) ausgeben;
  • NCCOPY Inhalt einer NetCDF Datei selektiv kopieren, Kompressionsniveau abwandeln, innere Struktur der Datei (File Chunking) abwandeln; und
  • NCGEN3 erzeugt eine NetCDF Datei aus einer CDL Textdatei; optional kann auch C oder FORTRAN Code automatisch damit erzeugt werden.

File Chunking

Für weitergehende Informationen siehe:

Terminologie

Globale Attribute

Gitter

Zeitkoordinate

Vertikalkoordinate

Reduktion der Datensatzgröße

Horizontales Koordinatensystem

Daten

Synoptische Daten

Zeitserien

Analysedaten


zurück zu Standard-Software-Anwendungen (Add-ons)


Strukturübersicht