...
Testen | Scenario | Beschrijving test | Model schematisatie (Z0 = zonder zoutbeperking) | Opmerkingen | Screenshot beschikbaar (zie Tabel TR.05) | |||
LHMZ0 | LSM3 chloride | LHM | LSM3 | |||||
---|---|---|---|---|---|---|---|---|
FAT 2.4.0.0 Test 3.1 | Referentie 2017 | Draaien van de smoketesten | smoketesten succesvol doorlopen | ja | ||||
FAT 2.4.0.0 Test 3.2 | Referentie 2017 | Draaien van de exports | — | — | — | — | BIJWERKEN | - |
FAT 2.4.0.0 Test 4.1 | Referentie 2017 | Reproductietest - Vergelijken GLG en GHG (kaartlagen GLG_20100101000000.asc en GHG_20100101000000.asc) | 2009: 2011: | nvt | nvt | nvt | na herstelacties voor twee issues (NWM-1185 (m vs. cm); NWM-1186 (verschil imod versie)) en een 1-op-1 vergelijking van executables en invoerbestanden (van modflow, metaswap mozart) tussen de NHI server en NWM omgeving zijn de resultaten nagenoeg identiek voor 2009, dwz. dat er voor hele kleine gebieden (o.a. in Limburg) beperkte verschillen te zien zijn, zie screenshots. Voor 2011 zijn er iets meer verschillen te zien, o.a. in het het westen van Nederland. De verschillen lijken te liggen op de randen van Mozart lsw's. Nadere analyse is nodig om deze verschillen te kunnen duiden (NWM-xxxx BIJWERKEN). | ja |
FAT 2.4.0.0 Test 4.2 | Referentie 2017 | Reproductietest - Vergelijken van DM debieten (tijdreeksen uit "Debieten in het netwerk.mpx") | 2009: 2011: | nvt | nvt | nvt | Vrijwel alle debietreeksen liggen perfect over elkaar. Voor een aantal locaties zijn zeer kleine verschillen te zien. Voor het jaar 2011 zijn er zelfs geen verschillen meer te zien in de figuren. | ja |
FAT 2.4.0.0 Test 4.3 | Referentie 2017 | Reproductietest - Vergelijken van Mozart peilen van het 'lsw' oppervlaktewater (tijdreeksen uit "*.mms, *.mz" bestanden) | 2009: 2011: | nvt | nvt | nvt | Er zijn voor het eerste jaar 2009 voor hele kleine gebieden (o.a. in Limburg) beperkte verschillen te zien, zie screenshots. Voor 2011 zijn er iets meer verschillen te zien, met name in het voorjaar. Nadere analyse is nodig om deze verschillen te kunnen duiden (NWM-xxxx BIJWERKEN). | ja |
...
Testen | Screenshot | ||
---|---|---|---|
FAT 2.4.0.0 Test 1.1 | |||
FAT 2.4.0.0 Test 1.2 | - | ||
FAT 2.4.0.0 Test 2.1 | |||
FAT 2.4.0.0 Test 3.1 | BIJWERKEN | ||
FAT 2.4.0.0 Test 4.1 | BIJWERKENGLG (links) en GHG (rechts), verschilkaart NWM berekening met berekening NHI-server: 2009: 2011: | FAT 2.4.0.0 Test 4.2 | detailkaart van GLG verschil 2011; de zwarte lijnen tonen de Mozart LSW's: BIJWERKEN 2009: 2011: |
FAT 2.4.0.0 Test 4.32 | Vergelijking DM takdebieten tussen berekening NHI-server (Referentie, blauwe lijn) en NWM berekening (NWM, oranje lijn). Als alleen de oranje lijn zichtbaar is liggen de resultaten perfect over elkaar heen. 2009: 2011: | ||
FAT 2.4.0.0 Test 4.3 | Vergelijken van Mozart peilen van het 'lsw' oppervlaktewater voor twee decades (1 april en 1 september): 2009: 2011: BIJWERKEN 2009: 2011: | ||
NWM-1173 en NWM-1199 | Voor de LHM workflow zijn modelversie en randvoorwaarde aan te passen: De WhatIf met aangepaste LHM versie heeft succesvol gedraaid: | ||
NWM-1137 | voor de fix (BenedenMerwede en Gat van Kampen): | ||
NWM-1139 | voor de fix: na de fix: | ||
NWM-1185 | GLG voor de fix: GLG na de fix maaiveld in meters voor postprocessing MODFLOW | ||
NWM-1186 | verschillen GLG FEWS vs NHI server voor de fix: Na fix veel minder verschillen: verschillen head's (20091228) FEWS vs. NHI server na fix meteo plus IMOD versie en warme start ipv koude start. Verkeerde inititiële condities MODFLOW verklaren de overige verschillen, zie het resultaat van de definitieve vergelijking bij FAT 2.4.0.0 Test 4.1. |
Overige testbevindingen
- Tijdens het testen is gebleken dat een aantal (oudere) executables falen na verwijderen van Microsoft redistributable 2010 (vcredist.exe) (NWM-1196). Het betreft o.a. LHM postprocessing scripts en Delwaq. Voor het Delwaq bakjesmodel (onderdeel LSM3 workflow) is daarom overgestapt op een nieuwere Delwaq versie (rev652). Maar omdat ook meerdere LHM postprocessing scripts afhankelijk zijn van deze redistributables is besloten om op de NWM-Testomgeving de Microsoft redistributable 2010 opnieuw uit te rollen, waarmee het issue is verholpen.
- Voor de LSM3 berekening zijn er nog twee openstaande issues bekend in de preprocessing stappen van de LSM3 workflow, met als gevolg dat nieuwe LSM3 berekeningen bij een volgende release (NWM 2.4.1.0) mogelijk (naar verwachting kleine) verschillen in uitkomsten zullen tonen:
...