Testbevindingen release 1.4

In deze sectie staan de testbevindingen voor release 1.4.

Samenvatting

Alle uitbreidingen hebben betrekking op de 'testprotocollen Zoetwater'. Er zijn geen uitbreidingen voor de 'testprotocollen Veiligheid'.

Er worden drie sporen onderscheiden, waarvan de laatste twee uitbreidingen zijn die in deze release gerealiseerd zijn:

• "S0" correspondeert met de 26-jarige basisprognose (reeds uitgevoerd)
• "S1" correspondeert met de "V0 WABES schematisatie" / 100-jarige reeks en toevoegen uitvoerlocaties
• "S2" correspondeert met een uitbreiding van S1. De volgende drie WABES maatregelen worden hier toegevoegd: "Rode Vaart toevoegen aan model", "Flexibel Peil IJsselmeer-Markermeer" en "Capaciteit KWA-15 (stap 1) aanpassen".

De 100-jaar simulaties zijn van 1911 t/m 2011. NB. De S0-basisprognoses zijn van 1981 t/m 2011.

In deze release zijn vier workflows toegevoegd:

• 100-jaar WABES-reeks voor REF2015S1
• 100-jaar WABES-reeks voor WARM2050S1
• 100-jaar WABES-reeks voor REF2015S2
• 100-jaar WABES-reeks voor WARM2050S2

De applicatie wordt gefaseerd opgeleverd voor vroegtijdige start van berekeningen. In deze release worden alleen de modelschematies LHM en optioneel LSMLT uitgebreid met workflows op basis van de 100-jaar WABES-reeks. NB. Voor de andere schematisaties in NWM (NDB, LTM, LTMLT) zal dit in de toekomst gerealiseerd worden.

Daarnaast zijn uitvoerlocaties toegevoegd aan het LSMLT model. In totaal zijn er nu resultaten voor 151 WABES-locaties beschikbaar.  NB. De "S0" workflows hebben eigen uitvoerlocaties, die qua aantal en locatie daarom deels zullen verschillen. 

Het testprotocol "Configuratie update (groot)" is het meest van toepassing, zie <<link>>. Bij een nieuwe workflow wordt in eerste instantie vergeleken met de modelresultaten van dit model dat buiten het NWM is gedraaid. De resultaten moeten exact overeenkomen, danwel logisch verklaard kunnen. Omdat er een overlap is met de 26-jaar basisprognoses (S0), zal met de S0 resultaten vergeleken worden. << vraag: is de 100-jaar tijdreeks voor de eerste 26 jaar 'identiek' aan de basisprognoses? Nee, de bovenstroomse debieten zijn opnieuw afgeleid en kunnen mogelijk verschillen van de basisprognoses.>>   << CW: Wat ik begrijp van Nienke is de zijn de referentie debieten ook gelijk aan de metingen. Deze zullen dus niet veranderen. Voor de scenario's zijn ze wel verschillend. >>

In een memo is vastgelegd welke uitgangspunten toegepast zijn voor de generatie van de 100-jaar afvoerreeks <<referentie toevoegen; NB. Het aanmaken van een link werkt niet meer in Wiki?>>  

Aanpassing testprotocol voor release 1.4

De testprotocollen zijn uitgebreid op de volgende onderdelen

• Check of de afvoer in LHM en LSMLT op het eerste rekenpunt in het model overeenkomt met de debieten die aangeleverd zijn voor Monsin enh Lobith. Dit dient getest te worden voor beide workflows.
• Check of de afvoeren bij Hagestein, Tiel en Lith in een bepaald jaar tussen 1981-2006 overeenkomen met de waarden uit de basisprognose. Check dit voor LHM en LSMLT voor het jaar 2003. << CW door de verandering in de regen/evaporatie etc zijn deze niet gelijk. Hier moeten we dit op basis van expert judgement bepalen of het goed gaat. >>
• Check of de zeespiegelstijging correct zijn doorgevoerd. 
• Check of de maatregelen doorkomen in het systeem.

Verder toe te voegen (m.b.t. de technische testen):

• Checken of het aantal toegevoegde locaties klopt. 

Nieuwe testprotocollen:

Als technische test: alle locaties uitvoeren naar Excel en die vergelijken met de Excel-file van Carine? NB. Bij de technische testen verandert alleen het aantal Locatie-id's. Andere parameters zoals module instanties en parameter-id's moeten hetzelfde blijven .

In de huidige testprotocollen is steeds het jaar 2003 gekozen voor de testen. Voor de nieuwe testprotocollen wordt naast 2003 ook 1911, 1912 en 2011 getoetst.
Voor REF2015S1 (voor LHM als LSMLT):

• (ZW-LHM-P-41 t/m 44 / ZW-LSMLT-P-41 t/m 44) Plausibiliteitstest voor bovenstroomse afvoer bij Monsin en Lobithvoor 1911, 1912, 2003 en 2011
• (ZW-LHM-P-45 / ZW-LSMLT-P-45) Plausibiliteitstest zeespiegel(rijzing) voor benedenstroomse waterstanden bij open rand Maasmond (=locatie Hoek van Holland); Voor REF2015 vergelijk met basisprognoses
• (ZW-LHM-P-46 / ZW-LSMLT-P-46) Plausibiliteitstest m.b.t. waterstand en debiet voor Hagestein, omdat hiervoor veel kennis/informatie beschikbaar is.

Voor WARM2050S1 (voor LHM als LSMLT):

• (ZW-LHM-P-51 t/m 54 / ZW-LSMLT-P-51 t/m 54) Plausibiliteitstest voor bovenstroomse afvoer bij Monsin en Lobithvoor 1911, 1912, 2003 en 2011
• (ZW-LHM-P-55 / ZW-LSMLT-P-55) Plausibiliteitstest zeespiegel(rijzing) voor benedenstroomse waterstanden bij open rand Maasmond (=locatie Hoek van Holland); Voor WARM2050 check op + 40 cm.
• (ZW-LHM-P-56 / ZW-LSMLT-P-56) Plausibiliteitstest m.b.t. waterstand en debiet voor Hagestein, omdat hiervoor veel kennis/informatie beschikbaar is.

Voor REF2015S2 (zowel voor LHM als LSMLT):

• (ZW-LHM-P-46 / ZW-LSMLT-P-46) Plausibiliteitstest m.b.t. waterstand en debiet voor Hagestein, omdat hiervoor veel kennis/informatie beschikbaar
• (ZW-LHM-P-47 / ZW-LSMLT-P-45) Plausibiliteitstest voor Flexibel Pijl IJsselmeer-Markermeer
• (ZW-LHM-P-48 / ZW-LSMLT-P-47) Plausibiliteitstest voor KWA-15
• (ZW-LHM-P-49 / ZW-LSMLT-P-46) Plausibiliteitstest voor Roode Vaart

Voor WARM2050S2 (zowel voor LHM als LSMLT):

• (ZW-LHM-P-46 / ZW-LSMLT-P-46) Plausibiliteitstest m.b.t. waterstand en debiet voor Hagestein, omdat hiervoor veel kennis/informatie beschikbaar
• (ZW-LHM-P-57 / ZW-LSMLT-P-57) Plausibiliteitstest voor Flexibel Pijl IJsselmeer-Markermeer
• (ZW-LHM-P-58 / ZW-LSMLT-P-58) Plausibiliteitstest voor KWA-15
• (ZW-LHM-P-59 / ZW-LSMLT-P-59) Plausibiliteitstest voor Roode Vaart

Vragen/Opmerkingen:

• In het NDN model, welke locaties bij de bovenstroomse randen Monsin en Lobith gaan we gebruiken om het (invoer)debiet te controleren? Evenzo welke locaties voor de benedenstroomse waterstanden bij de Maasmond?
Lobith: N_RT_001

Eijsden/Monsin: N_MS_001

Maasmond: N_NDB_1

Overzicht met zeespiegelrijzing per scenario:

Testbevindingen

Onderstaande tabel bevat resultaten van de technische en plausibiliteit testen voor Zoetwater.
De kolommen hebben de volgende betekenis:

• REF: referentie
• R: Rust
• D: Druk
• W: Warm
• S: Stoom
• T: technische testen
• P: plausibiliteit testen
• uitvoering: datum/tijdstip van uitvoering workflow op T-omgeving

De resultaten van de testen hebben de volgende betekenis:

• : succesvol, met als voorbehoud de in de testprotocollen opgenomen known issues.
• : niet succesvol
• n.v.t.: niet gedefinieerd/niet voorzien
• —: niet uitgevoerd

 Bij de testnummers staan twee nummers vermeld; de eerste geldt voor REF2015S1 en de tweede voor WARM20150S1.

Bij de plausibiliteitstesten waarin voor debieten de opgelegde randvoorwaarden en modelresutaten vergeleken zijn, is het verschil (in percentages) bijgevoegd

Regio	Workflow	Test nr	WABES REF2015S1			WABES WARM2050S1
			Uitvoering	T	P	Uitvoering	T	P
Landelijk	LHM	ZW-LHM-T-11	18-10-2016 13:05:40 (T0: 2003)		n.v.t.	18-10-2016 18:07:11 (T0: 2003)		n.v.t.
	LHM	ZW-LHM-P-41/51	19-10-2016 11:03:39 (T0: 1911)	n.v.t.	(2.5%)	17-10-2016 16:59:15 (T0: 1911)	n.v.t.	(4.6%)
	LHM	ZW-LHM-P-42/52	19-10-2016 22:55:30 (T0: 1912)	n.v.t.	—	18-10-2016 05:36:52 (T0: 1912)	n.v.t.	—
	LHM	ZW-LHM-P-43/53	18-10-2016 13:05:40 (T0: 2003)	n.v.t.	—	18-10-2016 18:07:11 (T0: 2003)	n.v.t.	—
	LHM	ZW-LHM-P-44/54	19-10-2016 00:23:55 (T0: 2011)	n.v.t.	(2.7%)	19-10-2016 06:06:03 (T0: 2011)	n.v.t.	(4.7%)
	LHM	ZW-LHM-P-45/55	18-10-2016 13:05:40 (T0: 2003)	n.v.t.	—	18-10-2016 18:07:11 (T0: 2003)	n.v.t.	—

Bij ZW-LHM-T-11 zijn er twee i.p.v. vier module id's, omdat bij LHM zonder zout alleen data wordt geimporteerd die nodig is om LSM en NDB te voorzien van modelforcering. NB. Bij de toekomstige runs met zout zullen er weer vier module id's aanwezig zijn.

<ToDo (Martijn nu): uitzoeken waarom de Locatie id's verschillen. NB. Test is alvast op  gezet. >>

Voor de S2-scenario's wordt niet voor alle vier jaren (1911, 1912, 2003, 2011) getoest of de randvoorwaarden goed doorkomen. Dit wordt voor 1 jaar getoetst, te weten 2003. 

Regio	Workflow	Test nr	WABES REF2015S2			WABES WARM20502
			Uitvoering	T	P	Uitvoering	T	P
Landelijk	LHM	ZW-LHM-T-11	19-10-2016 20:54:21 (T0: 2003)		n.v.t.	18-10-2016 17:50:23 (T0: 2003)		n.v.t.
	LHM	ZW-LHM-P-43/53	19-10-2016 20:54:21 (T0: 2003)	n.v.t.	—	18-10-2016 17:50:23 (T0: 2003)	n.v.t.	—
	LHM	ZW-LHM-P-45/55	19-10-2016 20:54:21 (T0: 2003)	n.v.t.	—	18-10-2016 17:50:23 (T0: 2003)	n.v.t.	—
	LHM	ZW-LHM-P-46/56	19-10-2016 20:54:21 (T0: 2003)	n.v.t.	—	18-10-2016 17:50:23 (T0: 2003)	n.v.t.	—
	LHM	ZW-LHM-P-47/57	19-10-2016 20:54:21 (T0: 2003)	n.v.t.	—	18-10-2016 17:50:23 (T0: 2003)	n.v.t.	—
	LHM	ZW-LHM-P-48/58	19-10-2016 20:54:21 (T0: 2003)	n.v.t.		18-10-2016 17:50:23 (T0: 2003)	n.v.t.

Bij de maatregel Roode Vaart blijkt de uitvoerlocatie Roode Vaart niet beschikbaar te zijn. Het debiet bij Oosterhout en in de Roode Vaart die tezamen 9 m3/s te zijn. Op basis van de modelresultaten

bij Oosterhout kanaal met behoorlijke zekerheid geconcludeerd worden dat de 'Roode Vaart maatregel' goed geimplementeerd is. Zo komen de modelresultaten overeen met de stand-alone simulatie buiten NWM om. Het debiet zonder deze maatregel zou 9 m3/s zijn en is in de S2-scenario's al lager. Pas als het debiet door de Roode Vaart als uitvoer beschikbaar is, kan deze maatregel in z'n geheel getest worden. Daarom staat er "" in de bovenstaande tabel.