In deze sectie staan de testbevindingen voor release 12.50.0.0 (VERSIE 9 JUNI VERSIE 29 SEPTEMBER 2017). In de sprint van 13 juni t/m 5 juli van 28 augustus t/m 29 september 2017 is hieraan gewerkt.
Pre-conditie voor het uitvoeren van een workflow is dat alle voorgaande workflows, als onderdeel van een serie workflows met afhankelijkheid van invoerdata, succesvol zijn afgerond. In de testbevindingen kan het voorkomen dat een tussenliggende workflow later opnieuw is uitgevoerd om een specifieke verbetering te testen. Indien zo'n verbetering impact heeft op daaropvolgende workflows, dan zijn deze workflows ook opnieuw getest.
Overzicht van de activiteitenDoel van deze release:
- LHM 3.3.0 inbouwen; dit stand-alone testen, waarbij LHM 3.0.2 vervangen wordt
- What-iffs inbouwen
- if functionaliteit
- Uitvoeren van pilot voor 'Flexibiliteit in locaties'
In deze release zijn de aanpassing voor de pilot voor 'Flexibiliteit in locaties' uiteindelijk niet doorgevoerd, omdat de pilot nog niet volledig kon worden getest.
De verbeterde hydrologische schematisatie van LHM 3.3.0 heeft effect op de Opmerkingen; Daarnaast heeft de verbeterde hydrologische schematisatie effect op toepassing binnen het Nationaal Water Model. De nieuwe invoer leidt schematisatie leidt tot een betere actuele basis voor het Nationaal Water Model. Voor de referentiesituatie is het effect van de nieuwe modelinvoer op de berekende wateraanvoer weliswaar naar verwachting beperkt t.o.v. het gebruik van versie 3.2.0 (, maar naar verwachting groter t.o.v. versie 3.02, die nu wordt toegepast, 0.2, die in de laatste versie 1.4.4.0 van het Nationaal Water Model is opgenomen (zie PvO LHM 3.1.0 en LHM 3.2.0). Maar het Het opnemen van run-off in het model, en de betere schematisatie van de maaivelddrains (herstel van een fout), leiden onder meer wijziging o.a. tot een wijziging van de berekende grondwateraanvulling. Het effect van klimaatscenario’s en maatregelen kan hierdoor regionaal wijzigen (verandering van de grondwatersituatie, zowel toe- als afnames). Voor de toepassing van het NWM heeft de correctie van rivierpeilen geen effect, omdat binnen het NWM gebruikt werd gemaakt van andere invoerfiles waar deze fout niet in zat.
Overzicht van de activiteiten:
De volgende vier workflows zijn uitgevoerd voor LHM 3.3.0: 2050 of 2085?
De workflow "100-jaar WABES-reeks voor
...
REF2015" is uitgevoerd. Hierbij is de volledige modellentrein 'LHM zonder zout', 'LSM zonder zout', NDB", 'LHM met zout', 'LSM met zout en 'LTM Light' uitgevoerd. De technische testen en de plausibiliteitstesten zijn uitgevoerd voor 2003.
Voor alle vier jaren (1911, 1912, 2003 en 2011) zijn technische testen uitgevoerd. De plausibiliteitstesten hebben alleen betrekking op 2003. Dit is consistent met eerdere releases.
Stand van zaken van de testen:
Overzicht van uitgevoerde testen:
Onderstaande tabellen bevatten de resultaten van de technische- en plausibiliteitstesten. De kolommen hebben de volgende betekenis:
- REF: referentie
- R: Rust
- D: Druk
- W: Warm
- S: Stoom
- T: technische testen
- P: plausibiliteit testen
- uitvoering: datum/tijdstip van uitvoering workflow op T-omgeving
...
De resultaten van de testen hebben de volgende betekenis:
: succesvol, met als voorbehoud de in de testprotocollen opgenomen known issues.
: niet succesvol- n.v.t.: niet gedefinieerd/niet voorzien
- —: nog niet uitgevoerd
Test voor 2004LHM zonder zout:
| Regio | Workflow | Test nr. | REF 2015 | nr | REF2015W 2085 | ||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Uitvoering | T | P | Uitvoering | T | P | ||||||||
| Landelijk | Landelijk | LHM | ZW-LHM-T-11 | 0012- | 0009-2017 | 0022: | 0045: | 0029 (T0: | 20042003) | — | nn.v.t. | 00-00-2017 00:00:00||
| LHM | ZW-LHM-P-43 | 12-09-2017 22:45:29 (T0: | 20042003) | — | nn.v.t. | | |||||||
| LHM | ZW-LHM-TP-45 | 12 | 00- | 0009-2017 | 0022: | 0045: | 0029 (T0: | 20042003) | — | nn.v.t. | 00-00-2017 00:00:00 | ||
| LHM | ZW-LHM-P-46 | 12-09-2017 22:45:29 (T0: | 20042003) | — | nn.v.t. | | |||||||
| LHM | ZW-LHM-P-1147 | 0012- | 0009-2017 | 0022: | 0045: | 0029 (T0: | 20042003) | nn.v.t. | — | 00-00-2017 00:00:00 (T0: 2004) | n.v.t. | — | |
| LHM | ZW-LHM-P-12 | 00-00-2017 00:00:00 (T0: 2004) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2004) | n.v.t. | — | ||||||
| LHM | ZW-LHM-P-13 | 00-00-2017 00:00:00 (T0: 2004) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2004) | n.v.t. | — | ||||||
Test voor de jaren 1911, 1912, 2003 en 2011:
| |||||
| LHM | ZW-LHM-P-48 | 12-09-2017 22:45:29 (T0: 2003) | n.v.t. | |
NB. Bij T-11 zijn er meer Locatie Id's (4887 vs. 4867), minder Parameter-Id's (41 vs. 83) en minder Module-instanties (2 vs. 4). Het aantal locaties wijkt (enigszins) af, omdat dit model opnieuw is opgebouwd. Er zijn minder Parameter-Id's en Module-instanties, omdat alleen de Id's geimporteerd worden die nodig zijn voor dit model.
NB. Bij P-48 zijn er enkele decaden waarbij het debiet bij De Roode Vaart 0 m3/s is. Dit is door inhoudelijk expert Geert Prinsen gecontroleerd en in orde bevonden.
Test voor LSM Light zonder zout:
| Regio | Workflow | Testnummer | REF2015 | ||
|---|---|---|---|---|---|
| Uitvoering | T | P | |||
| Landelijk | LSM Light | ZW-LSMLT-T-11 | 13-09-2017 15:38:05 (T0: 2003) | | n.v.t. |
| Landelijk | LSM Light | ZW-LSMLT-P-46 | 13-09-2017 15:38:05 (T0: 2003) | n.v.t | |
| Landelijk | LSM Light | ZW-LSMLT-P-47 | 13-09-2017 15:38:05 (T0: 2003) | n.v.t | |
| Landelijk | LSM Light | ZW-LSMLT-P-47 | 13-09-2017 15:38:05 (T0: 2003) | n.v.t | |
NB. Bij T-11 zijn er meer Locatie-Id's (1961 vs. 1723), meer Parameter-Id's (25 vs. 19) en meer Module-Instanties (4 vs. 3) dan in het testprotocol. Deze aantallen wijken (enigszins) af, omdat dit model opnieuw is opgebouwd.
Test voor NDB:
| Regio | Workflow | Testnummer | REF2015 | Regio | Workflow | Test nr. | REF 2015 | W 2085|||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Uitvoering | T | P | Uitvoering||||||||||||||
| Landelijk | T | P | NDB | ZW-NDB-T-11 | 13-09-2017 19:18:27 (T0: 2003) | | Landelijk | LHM | ZW-LHM-P-41 | 00-00-2017 00:00:00 (T0: 1911)n.v.t. | — | 00-00-2017 00:00:00 (T0: 1911|||||
| NDB | ZW-NDB-P-11 | 13-09-2017 19:18:27 (T0: 2003) | n.v.t. | — | ||||||||||||
| LHMNDB | ZW ZW-LHMNDB-P-4212 | 0013- | 0009-2017 | 0019: | 0018: | 0027 (T0: | 19122003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 1912) | | |||||
| NDB | ZW-NDB-P-13 | 13-09-2017 19:18:27 (T0: 2003) | n n.v.t. | — | ||||||||||||
| LHMNDB | ZW ZW-LHMNDB-P-4314 | 0013- | 0009-2017 | 0019: | 0018: | 0027 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 3003) | n.v.t. | — | LHM | ZW-LHM-P-44 | 00-00-2017 00:00 | ||
NB. Bij T-11: Er zijn meer Locatie-Id's (78 vs. 23) dan in het testprotocol. Het aantal locaties wijkt af, omdat dit model opnieuw is opgebouwd.
Test voor LHM met zout:
| Regio | Workflow | Testnummer | REF2015 | |||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Uitvoering | T | P | ||||||||||||||
| Landelijk | LHM | ZW-LHM-T-11 | 13-09-2017 21:12:00 (T0: | 20112003) | | nn.v.t. | — | 00-00-2017 00:00|||||||||
| LHM | ZW-LHM-P-43 | 13-09-2017 21:12:00 (T0: | 20112003) | nn.v.t. | — | |||||||||||
| LHM | ZW-LHM-P-45 | 0013- | 0009-2017 | 0021: | 0012:00 (T0: 2003) | nn.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | | |||||
| LHM | ZW-LHM-P-46 | 0013- | 0009-2017 | 0021: | 0012:00 (T0: 2003) | nn.v.t. | — | 00-00-2017 00:00 | ||||||||
| LHM | ZW-LHM-P-47 | 13-09-2017 21:12:00 (T0: 2003) | nn.v.t. | — | ||||||||||||
| LHM | ZW-LHM-P- | 4748 | 0013- | 0009-2017 | 0021: | 0012:00 (T0: 2003) | nn.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | LHM | ZW-LHM-P-48 | 00-00-2017 00:00:00 | ||
NB. Bij T-11: Er zijn meer Locatie-Id's (4912 vs. 4867) en minder Parameter-Id's (76 vs 83). Het aantal Locatie-Id's wijkt (enigszins) af, omdat dit model opnieuw is opgebouwd. Er zijn minder Parameter-Id's, omdat alleen de Id's geimporteerd worden die nodig zijn voor dit model.
NB. Bij P-48 zijn er enkele decaden waarbij het debiet bij De Roode Vaart 0 m3/s is. Dit is door inhoudelijk expert Geert Prinsen gecontroleerd en in orde bevonden
Voor What-if testen voor LHM model zonder zout:
Op basis van het ZW-LMH-W2050S1Z0 model is het ZW-LMH-W2050S2Z0 model gegenereerd. Vervolgens is vergeleken of de resultaten idendiek zijn aan die van het ZW-LMH-W2050S2Z0 model; zie ZW-WHATIF-P-11.
| Regio | Workflow | Testnummer | REF2015 | |||
|---|---|---|---|---|---|---|
| Uitvoering | T | P | ||||
| Landelijk | LHM | ZW-WHATIF-T-11 | 13-09-2017 20:02:06 (T0: 2003) | | n n.v.t. | — |
| LHM | ZW-WHATIF-P-11 | 13-09-2017 20:02:06 | 00-00-2017 00:00:00(T0: 2003) | nn.v.t. | — | |
...
Toekomstige aanpassing voor het testprotocol:
Uit de bovenstaande bevindingen voor de technische testen blijkt dat de aantallen (m.b.t. Locatie-Id's ,Parameter-Id's en Module-instanties) afwijken van die van de testprotocollen. Hiervoor is een verklaring gegeven. De modellen zijn namelijk opnieuw opgebouwd met o.a. een nieuwe lijst van locaties. Daarnaast kan het aantal Id's afwijken, omdat alleen die Id's worden geïmporteerd die nodig zijn voor een bepaald model.
De voorliggende 2.0.0.0 release wordt de nieuwe basis c.q. de nieuwe referentiesituatie voor toekomstige releases. Daarom zullen in de volgende NWM-release de testprotocollen aangepast worden met de aantallen die voor release 2.0.0.0 van toepassing zijn.
Release notes:
—