In deze sectie staan de testbevindingen voor release 1.4.2.0 (VERSIE 15 FEBRUARI VERSIE 9 MAART 2017). In de sprint van 15 februari t/m 28 februari 2017 m 9 maart 2017 is hieraan gewerkt.
Deze release is een vervolg op release 1.4.1.0 van december 2016. Het onderdeel Zoetwater van NWM bestaat uit een keten van modellen die sequentieel informatie aan elkaar doorgeven. In release 1.4.2.0 is LTM Light ('LTMLT') toegevoegd aan de modellentrein 'LHM zonder zout', 'LSM zonder zout', 'NDB', 'LHM met zout' en 'LSM met zout'. Dit is uitgevoerd voor de WABES prognoses S1 en S2, die een periode van 100 jaar (1912 t/m 2011) beslaan. De testbevindingen hebben betrekking op de jaren 1911, 1912, 2003 en 2011 (of alleen 2003?), wat consistent is met eerdere releases.
Pre-conditie voor het uitvoeren van een workflow is dat alle voorgaande workflows, als onderdeel van een serie workflows met afhankelijkheid van invoerdata, succesvol zijn afgerond. In de testbevindingen kan het voorkomen dat een tussenliggende workflow later opnieuw is uitgevoerd om een specifieke verbetering te testen. Indien zo'n verbetering impact heeft op de vervolg daaropvolgende workflows, dan zijn ook deze workflows ook opnieuw getest.
Overzicht van de activiteiten
In deze sectie wordt getracht een volledig overzicht van de activiteiten te geven.
Vier workflows voor NDBDe volgende vier workflows zijn uitgevoerd voor LTM Light:
- 100-jaar WABES-reeks voor REF2015S1 voor 1911, 1912, 2003 en 2011 of 2003
- 100-jaar WABES-reeks voor WARM2050S1voor 1911, 1912, 2003 en 2011
- 100-jaar WABES-reeks voor REF2015S2 voor 1911, 1912, 2003 en 2011
- 100-jaar WABES-reeks voor WARM2050S2 voor 1911, 1912, 2003 en 2011
Vier workflows voor 'LHM met zout':
- 100-jaar WABES-reeks voor REF2015S1 voor 1911, 1912, 2003 en 2011
- 100-jaar WABES-reeks voor WARM2050S1 voor 1911, 1912, 2003 en 2011
- 100-jaar WABES-reeks voor REF2015S2 voor 1911, 1912, 2003 en 2011
- 100-jaar WABES-reeks voor WARM2050S2 voor 1911, 1912, 2003 en 2011
Vier workflows voor het 'LSMLT met zout':
...
Voor alle vier jaren (1911, 1912, 2003 en 2011
...
) zijn technische testen uitgevoerd. De plausibiliteitstesten hebben alleen betrekking op 2003. Dit is consistent met eerdere releases.
Tijdens release 1.4.1.0 van december 2016 is het bovenstaande alleen voor 2003 uitgevoerd. Bij de stand-up van 15 febr. meldde Sibren dat 2003 opnieuw is gedaan worden vanwege een probleem met een restart. Voor de andere drie jaren moet dit nog gebeuren? Gaan we in deze release alleen testen voor 2003 of voor alle vier jaren?
Vier workflows voor het 'LTMLT':
- 100-jaar WABES-reeks voor REF2015S1 voor 2003
- 100-jaar WABES-reeks voor WARM2050S1 voor 2003
- 100-jaar WABES-reeks voor REF2015S2 voor 2003
- 100-jaar WABES-reeks voor WARM2050S2 voor 2003
In eerdere releases (zie bijv. 1.3) is LTMLT alleen voor 2003 getoetst. Het testprotocol voor LTMLT bevat momenteel alleen testen voor 2003. Dit zo houden? M.a.w., er hoeven geen testprotocollen toegevoegd te worden?
Stand van zaken van de testen:
...
: succesvol, met als voorbehoud de in de testprotocollen opgenomen known issues.
: niet succesvol- n.v.t.: niet gedefinieerd/niet voorzien
- —: nog niet uitgevoerd
'NDB', 'LHM met zout' en 'LSM met zout' toevoegen, voor een of meerdere jaren?
Voor S1-workflow met LSM Light:
| Regio | Workflow | Test nr | WABES REF2015S1 | WABES W2050S1 | ||||
|---|---|---|---|---|---|---|---|---|
| Uitvoering | T | P | Uitvoering | T | P | |||
| Landelijk | LSM Light | ZW-LSMLT-T-11 | 15-02-2017 13:13:01 (T0: 2003) | | n.v.t. | 15-02-2017 13:13:17 (T0: 2003) | | n.v.t. |
Voor S2-workflow met LSM Light:
| Regio | Workflow | Test nr | WABES REF2015S2 | WABES W2050S2 | ||||
|---|---|---|---|---|---|---|---|---|
| Uitvoering | T | P | Uitvoering | T | P | |||
| Landelijk | LSM Light | ZW-LSMLT-T-11 | 15-02-2017 13:13:12 (T0: 2003) | | n.v.t. | 15-02-2017 13:13:22 (T0: 2003) | | n.v.t. |
Voor S1-workflows met LTM LightVoor S1-workflows met LTMLT voor 2003:
| Regio | Workflow | Test nr | WABES REF2015S1 | WABES W2085S1 W2050S1 | |||||
|---|---|---|---|---|---|---|---|---|---|
| Uitvoering | T | P | Uitvoering | T | P | ||||
| Landelijk | LTM Light | ZW-LTMLT-T-11 | 08-03-2017 17:16:53 (T0: 1911) | | n.v.t. | 08-03-2017 17:17:03 (T0: 1911) | | n.v.t. | |
| LTM Light | ZW-LTMLT-T-11 | 08-03-2017 18:44:41 (T0: 1912) | | n.v.t. | 08-03-2017 18:45:47 (T0: 1912) | | n.v.t. | ||
| LTM Light | ZW-LTMLT-T-11 | 0008-0203-2017 0010:0012:00 48 (T0: 2003) | — | n.v.t. | 0008-0203-2017 0010:0012:00 58 (T0: 2003) | — | n.v.t. | ||
| LTM Light | ZW-LTMLT-T-1211 | 0002-0203-2017 0012:0054:00 13 (T0: 20032011) | — | n.v.t. | 0002-0203-2017 0014:0054:00 18 (T0: 20032011) | — | n.v.t. | ||
| LTM Light | ZW-LTMLT-P-11 | 08-03-2017 10:12:48 (T0: 2003) | n.v.t. | | 08-03-2017 10:12:58 (T0: 2003) | n.v.t. | | ||
| LTM Light | ZW-LTMLT-P-12 | 08-03-2017 10:12:48 00-02-2017 00:00:00 (T0: 2003) | n.v.t. | — | 0008-0203-2017 0010:0012:00 58 (T0: 2003) | n.v.t. | . | ||
| LTM Light | ZW-LTMLT-P-14 | n.v.t. | n.v.t. | 08-03-2017 10:12:58 (T0: 2003) | n.v.t. | . | |||
| LTM Light | ZW-LTMLT-P-15 | n.v.t. | n.v.t. | 08-03-2017 10:12:58 (T0: 2003) | n.v.t. | . | |||
| LTM Light | ZW-LTMLT-P-16 | n.v.t. | n.v.t. | 08-03-2017 10:12:58 00-02-2017 00:00:00 (T0: 2003) | n.v.t. | . | |||
| LTM Light | ZW-LTMLT-P-17 | n.v.t. | — | n.v.t. | 08-03-2017 10:12:58 00-02-2017 00:00:00 (T0: 2003) | n.v.t. | . | ||
Voor S2-workflows met LTM Light:
| Regio | Workflow | Test nr | WABES REF2015S2 | WABES W2050S2 | |||||
|---|---|---|---|---|---|---|---|---|---|
| Uitvoering | T | P | Uitvoering | T | P | ||||
| Landelijk | LTM Light | ZW-LTMLT-T-11 | 08-03-2017 17:16:58 (T0: 1911) | | n.v.t. | 08-03-2017 17:17:13 (T0: 1911) | | n.v.t. | |
| LTM Light | ZW-LTMLT-T-11 | 08-03-2017 18:44:36 (T0: 1912) | | n.v.t. | 08-03-2017 18:45:52 (T0: 1912) | | n.v.t. | ||
| LTM Light | ZW-LTMLT-P-13-T-11 | 08-03-2017 10:12:53 (T0: 2003) | | n.v.t. | 08-03-2017 10:13:08 (T0: 2003) | | n.v.t. | ||
| LTM Light | ZW-LTMLT-T-11 | 02-03-2017 14:34:34 (T0: 2011) | | n.v.t. | 02-03-2017 16:51:11 (T0: 2011) | | n.v.t. | ||
| LTM Light | ZW-LTMLT-P-11 | 08-03-2017 10:12:53 00-02-2017 00:00:00 (T0: 2003) | n.v.t. | — | 0008-0203-2017 0010:0013:00 08 (T0: 2003) | n.v.t. | — | ||
| LTM Light | ZW-LTMLT-P-1412 | 0008-0203-2017 0010:0012:00 53 (T0: 2003) | n.v.t. | — | 0008-0203-2017 0010:0013:00 08 (T0: 2003) | n.v.t. | — | ||
| LTM Light | ZW-LTMLT-P-1514 | n.v.t. | n.v.t. | 08-03-2017 10:13:08 00-02-2017 00:00:00 (T0: 2003) | n.v.t. | | |||
| LTM Light | ZW-LTMLT-P-15 | n.v.t. | — | n.v.t. | 08-03-2017 10:13:08 00-02-2017 00:00:00 (T0: 2003) | n.v.t. | — | ||
| LTM Light | ZW-LTMLT-P-16 | 00-02-2017 00:00:00n.v.t. | n.v.t. | 08-03-2017 10:13:08 (T0: 2003) | n.v.t. | | |||
| LTM Light | ZW-LTMLT-P-17 | n.v.t. | — | 00-02-2017 00:00:00n.v.t. | 08-03-2017 10:13:08 (T0: 2003) | n.v.t. | — | ||
Ook zo'n tabel toevoegen voor S2
In het testprotocol staan testen voor S0. Zijn die ook van toepassing op S1 en S2?
| |
Voor S1-workflow met 'Export voor LTM Light':
| Regio | Workflow | Test nr | WABES REF2015S1 | WABES W2050S1 | ||||
|---|---|---|---|---|---|---|---|---|
| Uitvoering | T | P | Uitvoering | T | P | |||
| Landelijk | LTM Light | ZW-LTMLT-T-91 | 08-03-2017 18:44:41 (T0: 1912) | | n.v.t. | 08-03-2017 18:45:47 (T0: 1912) | | n.v.t. |
Voor S2-workflow met 'Export voor LTM Light':
| Regio | Workflow | Test nr | WABES REF2015S2 | WABES W2050S2 | ||||
|---|---|---|---|---|---|---|---|---|
| Uitvoering | T | P | Uitvoering | T | P | |||
| Landelijk | LTM Light | ZW-LTMLT-T-91 | 08-03-2017 18:44:36 (T0: 1912) | | n.v.t. | 08-03-2017 18:45:52 (T0: 1912) | | n.v.t. |
Kwaliteit van de LTM Light modelresultaten:
Over de LTM Light (LTMLT) modelresultaten wordt opgemerkt dat lokaal hoge temperaturen berekend worden. Het effect van warmtelozingen wordt nauwkeurig gesimuleerd in gebieden van het LTMLT-model met behoorlijke stroming (waaronder het hoofdwatersysteem). Echter in gebieden met weinig stroming, zoals in de Rotterdamse haven, wordt de bijdrage van warmtelozingen overschat en kunnen lokaal hoge temperaturen optreden. Op dit onderdeel dient het LTMLT-model te worden verbeterd. In het verleden is dit bij de basisprognose berekeningen (S0-workflows) van LTMLT ook al geconstateerd. Deze bevinding over het LTMLT-model is in 2016 gerapporteerd aan RWS; zie Deltares rapport "Landelijk Temperatuurmodel in het Nationaal Water Model" (van 30 oktober 2016 met kenmerk 1220056-010-ZWS-0001). Het verbeteren van het LTMLT-model (bijv. meer diffuus te lozen en om lokaal de dispersie te verhogen) is geen onderdeel van de Nationaal Water Model-releases, maar dient in een ander project gerealiseerd te worden.
(Andere testen zoals het importeren van de meteoforcering? Hoe dit te doen?)