NCDELTA

Basisinformationen

Programm-Name

NCDELTA

Version

August 2021

Beschreibung

August 2021

Stichworte

Postprozessor
Differenzen für synoptische Daten (optionale Beschränkung des Zeitraums)
Differenzen für Kennwerte
Differenzen für extensive Größen
Eingangsdaten für Taylor-Diagramm
Skill nach Murphy (1988) Gleichung 4
Skill nach Taylor (2001) Gleichungen 4 und 5
Skill nach Willmott (1981) Index of agreement (d)
Median, Perzentile (Q01, Q05, Q95, Q99)
Parallelisierung mit OpenMP
(Teil-) Automatisierte Qualitätssicherung (Wertebereich)
Automatische Anpassung der READ-Daten-Portionen an Chunk-Größe
Automatisches Setzen der WRITE Chunk-Größe
Ablage des Inhalts der ASCII-Eingabesteuerdateien in netcdf.nc (als Variable)
Ablage der MD5-Hash-Werte von Eingabedateien in netcdf.nc (als Variable)
optionale Verwendung der Message Passing Interface (MPI, MPI Forum)

Danksagung: This project took advantage of netCDF software developed by UCAR/Unidata (www.unidata.ucar.edu/software/netcdf/).

Kurzbeschreibung

Das Programm berechnet Differenzen für vergleichbare Variablen (primäre Variablenpaare) sowie gegebenenfalls weitere, daraus abgeleitete statistische Daten, und außerdem Eingangsdaten für Taylor-Diagramme (Details siehe Differenzen der Berechnungsergebnisse). Das Zusammenführen der primären Variablenpaare erfolgt dabei weitestgehend automatisch, kann aber von dem Anwender in Grenzen manuell übersteuert werden (siehe ncdelta.dat). Die primären Differenzen berechnen sich gemäß Vergleichsdaten minus Referenzdaten.

Anforderungen an synoptische Daten mit jeweils konstantem Zeitschritt:

1. Die Datensätze können eine unterschiedliche Anzahl von Terminen enthalten, allerdings müssen die zu vergleichenden Zeiträume gleich lang sein. Es können also verschiedene, aber gleich lange Zeiträume miteinander verglichen werden;
2. Bei Datensätzen mit konstantem Zeitschritt dürfen sich die Zeitschritte um ein ganzzahliges Vielfaches voneinander unterscheiden.

Anforderungen an zu vergleichende (zeitabhängige) Daten mit variablem Zeitschritt:

1. Die Datensätze müssen dieselbe Anzahl von Terminen enthalten, wobei die Zeiträume selbst verschieden sein dürfen.

Anmerkungen zur räumlichen Lage zu vergleichender Datensätze:

1. Datensätze müssen nicht an denselben Positionen vorliegen;
2. Die Datensätze müssen sich räumlich zu einem gewissen Grad überlappen;
3. Die Koordinaten der Datensätze dürfen in verschiedenen Koordinatensystemen vorliegen, z. B. Gauß-Krüger und UTM;
4. Die Daten einer Position werden mit den Daten der jeweils am nächsten liegenden Position verglichen, insofern der Abstand zwischen den Positionen einen maximal zulässigen Abstand (siehe ncdelta.dat) nicht überschreitet.

Anmerkungen zum Vergleich extensiver Größen:

1. Bei extensiven Größen wird als Gewicht die relevante Größe der Berechnungszelle berücksichtigt (Fläche, Länge).

Eingabe-Dateien

1. allgemeine Eingabedaten (Dateityp ncdelta.dat);
2. Referenzdaten, z. B. Ist-Zustand (Dateityp cf-netcdf.nc);
3. Vergleichsdaten, z. B. Variante (Dateityp cf-netcdf.nc);
4. für eine (teil-) automatisierte Qualitätssicherung (Dateityp bounds_verify.dat).

Ausgabe-Dateien

1. Ergebnisse (Dateityp cf-netcdf.nc)
2. (optional) Datei mit Informationen zum Programmablauf (Dateityp ncdelta.sdr)
3. (optional) Datei mit Testausgaben (Dateityp ncdelta.trc)

Methode

Das Programm untergliedert sich im Wesentlichen in folgende Abschnitte:

1. Lesen, Prüfen und Druckerausgabe der Steuerdaten des Anwenders;
2. Metadaten der Referenzdaten lesen;
3. Metadaten der Vergleichsdaten lesen;
4. Metadaten der Referenz- und Vergleichsdaten in programminterne Datenobjekte transferieren;
5. Metadaten vergleichen und auf grundlegende Inkonsistenzen (insbesondere Referenzpositionen) überprüfen;
6. Klassifizierung der Referenz- und Vergleichsdaten durchführen;
7. Primäre Variablenpaare finden: eine Vergleichsvariable hat genau eine Referenzvariable als Partner; aus den zu einem primären Variablenpaar gehörenden Variablen werden später die primären Ergebnisdaten erzeugt;
8. Bestimmen der aus den Referenz- und Vergleichsdaten in die Ergebnisdatei zu kopierenden Variablen;
9. Ermitteln der für die räumliche Interpolation der Referenzdaten auf die Positionen der Vergleichsdaten erforderlichen Matrizen;
10. Erzeugen der Metadaten für die Ergebnisdatei; diese setzen sich i. W. aus den Metadaten der zu kopierenden Variablen, der primären Berechnungsergebnisse, neu zu erzeugenden Koordinatenvariablen (Zeit, Vertikale), sowie zu kopierender oder neu zu erzeugender Gewichts- und weiterer Hilfsvariablen zusammen;
11. Kopieren der aus den Eingangsdateien in die Ergebnisdatei zu kopierenden Daten;
12. Berechnen aller primären Ergebnisvariablen, (neuer) Zeit- und Vertikalkoordinaten, sowie Gewichte und Hilfsvariablen. Bei primären Ergebnisvariablen werden optional vorhandene Hilfsvariablen mit Modifikator status_flag im standard_name berücksichtigt, insofern die Bedeutung good durch ein Bit (Flag) repräsentiert wird.
13. Für die Definition der verschiedenen Skills wird auf nachfolgende Literatur verwiesen:
    • Murphy, Allan H. (1988) "Skill Scores Based on the Mean Square Error and Their Relationship to the Correlation Coefficient". Monthly Weather Review, Dec. 1988, Seiten 2417 - 2424.
    • Taylor, Karl E. (2001) "Summarizing multiple aspects of model performance in a single diagram". Journal of Geophysical Research, Vol 106, No. D7, April 16, 2001, Seiten 7183 - 7192.
    • Willmott, Cort J. (1981) "On the validation of models". Physical Geography, Seiten 184–194.

Falls beim Lesen von Daten ein HDF error auftritt wird versucht, die Werte des gewünschten Datenrecords aus den Werten zeitlich benachbarter Records zu rekonstruieren (Interpolation). Diese Reparatur funktioniert ausschließlich für von der Zeit abhängige Variablen.

Ein Leitfaden zur Erfassung der DMQS-Metadaten steht hier.

Vorlauf-Programme

DATACONVERT, BOE2NC, NCAGGREGATE, NCANALYSE, NCCHUNKIE, NCCUTOUT, NCRCATMAT, NetCDF Operators, UNK, UNTRIM2007, UNTRIM2

Nachlauf-Programme

DAVIT, NCAUTO, NCCHUNKIE, NCCUTOUT, NCPLOT, NCPOLO, NCVIEW2D, NC2TABLE, TAYLORTARGETDIAGRAM

Weitere Informationen

Programmiersprache

Fortran95

zusätzliche Software

keine

Originalversion

G. Lang,S. Spohr

Programmpflege

G. Lang,S. Spohr

Dokumentation/Literatur

• Vorträge:
  • 2015-07-15: NCDELTA - Differenzen neu berechnet.
• Musterdateien:
  • Musterdateien finden sich in $PROGHOME/examples/ncdelta/

---

zurück zu Programmkennblätter

---

Strukturübersicht