In deze sectie staan de testbevindingen voor release 2.0.0.0 (VERSIE 6 VERSIE 29 SEPTEMBER 2017). In de sprint van 28 augustus t/m 15 m 29 september 2017 is hieraan gewerkt.
...
Doel van deze release:
- LHM 3.3.0 inbouwen (en LHM. , waarbij LHM 3.0.2 vervangen )wordt
- What-if functionaliteit inbouwen
- Flexibiliteit m.b.t. de locaties inbouwen (pilot)
Opmerkingen;
1) In deze sprint hoeven de scenario's nog niet in te testomgeving te draaien. Toch is alvast een testrapport opgesteld om vast te leggen welke workflows in de eerstvolgende sprint (in september 2017) succesvol uitgevoerd moeten zijn.
In deze sprint is het testprotocol uitgebreid met: specifieke test voor LHM 3.3.0, testprotocol voor What-If functionaliteit en testprotocol voor 'flexibiliteit voor locaties'. << NOG TE DOEN>>
- Uitvoeren van pilot voor 'Flexibiliteit in locaties'
In deze release zijn de aanpassing voor de pilot voor 'Flexibiliteit in locaties' uiteindelijk niet doorgevoerd, omdat de pilot nog niet volledig kon worden getest.
2) De verbeterde hydrologische schematisatie van LHM 3.3.0 heeft effect op de toepassing binnen het Nationaal Water Model. De nieuwe invoer leidt schematisatie leidt tot een betere actuele basis voor het Nationaal Water Model. Voor de referentiesituatie is het effect van de nieuwe modelinvoer op de berekende wateraanvoer weliswaar naar verwachting beperkt t.o.v. het gebruik van versie 3.2.0 (, maar naar verwachting groter t.o.v. versie 3.02, die nu wordt toegepast, 0.2, die in de laatste versie 1.4.4.0 van het Nationaal Water Model is opgenomen (zie PvO LHM 3.1.0 en LHM 3.2.0). Het opnemen van run-off in het model, en de betere schematisatie van de maaivelddrains (herstel van een fout), leiden o.a. tot een wijziging van de berekende grondwateraanvulling. Het effect van klimaatscenario’s en maatregelen kan hierdoor regionaal wijzigen (verandering van de grondwatersituatie, zowel toe- als afnames). Voor de toepassing van het NWM heeft de correctie van rivierpeilen geen effect, omdat binnen het NWM gebruikt werd gemaakt van andere invoerfiles waar deze fout niet in zat.
Overzicht van de activiteiten:
De volgende twee workflows zijn uitgevoerd:
De workflow "100-jaar WABES-reeks voor REF2015
...
" is uitgevoerd. Hierbij is de volledige modellentrein 'LHM zonder zout', 'LSM zonder zout', NDB", 'LHM met zout', 'LSM met zout en 'LTM Light' uitgevoerd
Voor de jaren 1911 en 1912 zijn technische testen uitgevoerd. De plausibiliteitstesten hebben alleen betrekking op 2003.
NB. De software in deze release wordt ontwikkeld in een apart set (S3), die bij oplevering hernoemd wordt naar S0. De oude sets S0, S1, S2 en S3 komen hiermee te vervallen
. De technische testen en de plausibiliteitstesten zijn uitgevoerd voor 2003.
Overzicht van uitgevoerde testenStand van zaken van de testen:
Onderstaande tabellen bevatten de resultaten van de technische- en plausibiliteitstesten. De kolommen hebben de volgende betekenis:
...
: succesvol, met als voorbehoud de in de testprotocollen opgenomen known issues.
: niet succesvol- n.v.t.: niet gedefinieerd/niet voorzien
- —: nog niet uitgevoerd
Test voor LHM zonder zout:
| Regio | Workflow | Test nr.nr | REF 2015REF2015 | W 2050 | ||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Uitvoering | T | P | Uitvoering | T | P | |||||||||
| Landelijk Landelijk | LHM | ZW-LHM-T-11 | 0012- | 0009-2017 | 0022: | 0045: | 0029 (T0: | 19112003) | — | nn.v.t. | 00-00-2017 00:00:00 (T0: 1911) | — | n.v.t. | |
| LHM | ZW-LHM-TP-1143 | 0012- | 0009-2017 | 0022: | 0045: | 0029 (T0: | 19122003) | — | nn.v.t. | 00-00-2017 00:00:00 (T0: 1912) | — | n.v.t. | | |
| LHM | ZW-LHM-P-1145 | 0112-09-2017 | 0822: | 5045: | 4629 (T0: 2003) | nn.v.t. | | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | | |||
| LHM | ZW-LHM-P-46 | 12 | 00- | 0009-2017 | 0022: | 0045: | 0029 (T0: 2003) | nn.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | | |
| LHM | ZW-LHM-P-1347 | 0012- | 0009-2017 | 0022: | 0045: | 0029 (T0: 2003) | nn.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | | ||
| LHM | ZW-LHM-P- | 4148 | 0012- | 0009-2017 | 0022: | 0045: | 0029 (T0: 2003) | nn.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | ||
| LHM | ZW-LHM-P-42 | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | |||||||
| LHM | ZW-LHM-P-43 | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | |||||||
| LHM | ZW-LHM-P-44 | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | |||||||
| LHM | ZW-LHM-P-45 | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | |||||||
| ||||||||||||||
NB. Bij T-11 zijn er meer Locatie Id's (4887 vs. 4867), minder Parameter-Id's (41 vs. 83) en minder Module-instanties (2 vs. 4). Het aantal locaties wijkt (enigszins) af, omdat dit model opnieuw is opgebouwd. Er zijn minder Parameter-Id's en Module-instanties, omdat alleen de Id's geimporteerd worden die nodig zijn voor dit model.
NB. Bij P-48 zijn er enkele decaden waarbij het debiet bij De Roode Vaart 0 m3/s is. Dit is door inhoudelijk expert Geert Prinsen gecontroleerd en in orde bevonden.
Test voor LSM Light zonder zout:
| Regio | Workflow | Testnummer | REF2015 | ||
|---|---|---|---|---|---|
| Uitvoering | T | P | |||
| Landelijk | LSM Light | ZW-LSMLT-T-11 | 13-09-2017 15:38:05 (T0: 2003) | | n.v.t. |
| Landelijk | LSM Light | ZW-LSMLT-P-46 | 13-09-2017 15:38:05 (T0: 2003) | n.v.t | |
| Landelijk | LSM Light | ZW-LSMLT-P-47 | 13-09-2017 15:38:05 (T0: 2003) | n.v.t | |
| Landelijk | LSM Light | ZW-LSMLT-P-47 | 13-09-2017 15:38:05 (T0: 2003) | n.v.t | |
NB. Bij T-11 zijn er meer Locatie-Id's (1961 vs. 1723), meer Parameter-Id's (25 vs. 19) en meer Module-Instanties (4 vs. 3) dan in het testprotocol. Deze aantallen wijken (enigszins) af, omdat dit model opnieuw is opgebouwd.
Test voor NDB:
| Regio | Workflow | Testnummer | REF2015 | |||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Uitvoering | T | P | ||||||||||||||
| Landelijk | NDB | ZW-NDB-T-11 | 13-09-2017 19:18:27 (T0: 2003) | | n.v.t. | |||||||||||
| NDB | ZW-NDB-P-11 | 13-09-2017 19:18:27 | LHM | ZW-LHM-P-46 | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00(T0: 2003) | n.v.t. | — | ||||||
| LHMNDB | ZW ZW-LHMNDB-P-4712 | 0013- | 0009-2017 | 0019: | 0018: | 0027 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | LHM | ZW-LHM-P-48 | 00-00-2017 00:00:00 | ||
| NDB | ZW-NDB-P-13 | 13-09-2017 19:18:27 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | LHM | ZW-LHM-P-49 | 00-00-2017 00:00:00 | ||||||
| NDB | ZW-NDB-P-14 | 13-09-2017 19:18:27 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | |||||||||
| |
NB. Bij T-11: Er zijn meer Locatie-Id's (78 vs. 23) dan in het testprotocol. Het aantal locaties wijkt af, omdat dit model opnieuw is opgebouwd.
Test voor LHM met zout:
| Regio | Workflow | Test nr. | REF 2015 | Testnummer | REF2015W 2050 | |||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Uitvoering | T | P | Uitvoering | T | P | |||||||||
| Landelijk | Landelijk | LHM | ZW-LHM-T-11 | 0013- | 0009-2017 | 0021: | 0012:00 (T0: | 19112003) | — | n.v.t. | 00-00-2017 00:00:00 (T0: 1911) | — | | n n.v.t. |
| LHM | ZW-LHM-TP-1143 | 0013- | 0009-2017 | 0021: | 0012:00 (T0: | 19122003) | — | nn.v.t. | 00-00-2017 00:00:00 (T0: 1912) | — | n.v.t. | | ||
| LHM | ZW-LHM-P-1145 | 0513-09-2017 | 08:03:37 (T0: 2003)n.v.t. | | 00-00-2017 00:00:00 21:12:00 (T0: 2003) | nn.v.t. | — | |||||||
| LHM | ZW-LHM-P-1246 | 0013- | 0009-2017 | 0021: | 0012:00 (T0: 2003) | nn.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | | |||
| LHM | ZW-LHM-P-47 | 13 | 05-09-2017 | 0821: | 03:37 (T0: 2003)n.v.t. | | 00-00-2017 00:00:00 12:00 (T0: 2003) | nn.v.t. | — | |||||
| LHM | ZW-LHM-P- | 4148 | 0013- | 0009-2017 | 0021: | 0012:00 (T0: 2003) | nn.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | |||
| LHM | ZW-LHM-P-42 | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | |||||||
| LHM | ZW-LHM-P-43 | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | |||||||
| LHM | ZW-LHM-P-44 | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | |||||||
| LHM | ZW-LHM-P-45 | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | |||||||
| LHM | ZW-LHM-P-46 | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | |||||||
| LHM | ZW-LHM-P-47 | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | |||||||
| LHM | ZW-LHM-P-48 | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | |||||||
| LHM | ZW-LHM-P-49 | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | 00-00-2017 00:00:00 (T0: 2003) | n.v.t. | — | |||||||
|
NB. Bij T-11: Er zijn meer Locatie-Id's (4912 vs. 4867) en minder Parameter-Id's (76 vs 83). Het aantal Locatie-Id's wijkt (enigszins) af, omdat dit model opnieuw is opgebouwd. Er zijn minder Parameter-Id's, omdat alleen de Id's geimporteerd worden die nodig zijn voor dit model.
NB. Bij P-48 zijn er enkele decaden waarbij het debiet bij De Roode Vaart 0 m3/s is. Dit is door inhoudelijk expert Geert Prinsen gecontroleerd en in orde bevonden
Voor What-if testen voor LHM model zonder zout:
Op basis van het ZW-LMH-W2050S1Z0 model is het ZW-LMH-W2050S2Z0 model gegenereerd. Vervolgens is vergeleken of de resultaten idendiek zijn aan die van het ZW-LMH-W2050S2Z0 model; zie ZW-WHATIF-P-11.
| Regio | Workflow | Testnummer | REF2015 | ||
|---|---|---|---|---|---|
| Uitvoering | T | P | |||
| Landelijk | LHM | ZW-WHATIF-T-11 | 13-09-2017 20:02:06 (T0: 2003) | | n.v.t. |
| LHM | ZW-WHATIF-P-11 | 13-09-2017 20:02:06 (T0: 2003) | n.v.t. | | |
Toekomstige aanpassing voor het testprotocol:
Uit de bovenstaande bevindingen voor de technische testen blijkt dat de aantallen (m.b.t. Locatie-Id's ,Parameter-Id's en Module-instanties) afwijken van die van de testprotocollen. Hiervoor is een verklaring gegeven. De modellen zijn namelijk opnieuw opgebouwd met o.a. een nieuwe lijst van locaties. Daarnaast kan het aantal Id's afwijken, omdat alleen die Id's worden geïmporteerd die nodig zijn voor een bepaald model.
De voorliggende 2.0.0.0 release wordt de nieuwe basis c.q. de nieuwe referentiesituatie voor toekomstige releases. Daarom zullen in de volgende NWM-release de testprotocollen aangepast worden met de aantallen die voor release 2.0.0.0 van toepassing zijn.
Release notes:
—