In deze sectie staan de testbevindingen voor release 2.0.0.0 (VERSIE 15 SEPTEMBER 2017). In de sprint van 28 augustus t/m 29 september 2017 is hieraan gewerkt.
Pre-conditie voor het uitvoeren van een workflow is dat alle voorgaande workflows, als onderdeel van een serie workflows met afhankelijkheid van invoerdata, succesvol zijn afgerond. In de testbevindingen kan het voorkomen dat een tussenliggende workflow later opnieuw is uitgevoerd om een specifieke verbetering te testen. Indien zo'n verbetering impact heeft op daaropvolgende workflows, dan zijn deze workflows ook opnieuw getest.
Doel van deze release:
- LHM 3.3.0 inbouwen, waarbij LHM 3.0.2 vervangen wordt
- What-if functionaliteit
- Pilot voor 'Flexibiliteit in locaties'
In deze release is de pilot voor 'Flexibiliteit in locaties' uiteindelijk niet uitgevoerd.
De verbeterde hydrologische schematisatie van LHM 3.3.0 heeft effect op de toepassing binnen het Nationaal Water Model. De nieuwe invoer leidt tot een betere basis voor het Nationaal Water Model. Voor de referentiesituatie is het effect van de nieuwe modelinvoer op de berekende wateraanvoer weliswaar naar verwachting beperkt t.o.v. het gebruik van versie 3.2.0, maar naar verwachting groter t.o.v. versie 3.02, die nu wordt toegepast (zie PvO LHM 3.1.0 en LHM 3.2.0). Het opnemen van run-off in het model, en de betere schematisatie van de maaivelddrains (herstel van een fout), leiden o.a. tot een wijziging van de berekende grondwateraanvulling. Het effect van klimaatscenario’s en maatregelen kan hierdoor regionaal wijzigen (verandering van de grondwatersituatie, zowel toe- als afnames). Voor de toepassing van het NWM heeft de correctie van rivierpeilen geen effect, omdat binnen het NWM gebruikt werd gemaakt van andere invoerfiles waar deze fout niet in zat.
Overzicht van de activiteiten:
De volgende twee workflows zijn uitgevoerd:
- 100-jaar WABES-reeks voor REF2015
- 100-jaar WABES-reeks voor WARM2050
Hierbij is de volledige modellentrein 'LHM zonder zout', 'LSM zonder zout', NDB", 'LHM met zout', 'LSM met zout en 'LTM Light' uitgevoerd
De technische testen en de plausibiliteitstesten zijn uitgevoerd voor 2003.
Overzicht van uitgevoerde testen:
Onderstaande tabellen bevatten de resultaten van de technische- en plausibiliteitstesten. De kolommen hebben de volgende betekenis:
- REF: referentie
- R: Rust
- D: Druk
- W: Warm
- S: Stoom
- T: technische testen
- P: plausibiliteit testen
- uitvoering: datum/tijdstip van uitvoering workflow op T-omgeving
De resultaten van de testen hebben de volgende betekenis:
: succesvol, met als voorbehoud de in de testprotocollen opgenomen known issues.
: niet succesvol- n.v.t.: niet gedefinieerd/niet voorzien
- —: nog niet uitgevoerd
Test voor LHM zonder zout:
| Regio | Workflow | Test nr | REF2015 | ||
|---|---|---|---|---|---|
| Uitvoering | T | P | |||
| Landelijk | LHM | ZW-LHM-T-11 | 12-09-2017 22:45:29 (T0: 2003) | | n.v.t. |
| LHM | ZW-LHM-P-43 | 12-09-2017 22:45:29 (T0: 2003) | n.v.t. | | |
| LHM | ZW-LHM-P-45 | 12-09-2017 22:45:29 (T0: 2003) | n.v.t. | | |
| LHM | ZW-LHM-P-46 | 12-09-2017 22:45:29 (T0: 2003) | n.v.t. | | |
| LHM | ZW-LHM-P-47 | 12-09-2017 22:45:29 (T0: 2003) | n.v.t. | | |
| LHM | ZW-LHM-P-48 | 12-09-2017 22:45:29 (T0: 2003) | n.v.t. | | |
Bij T-11: 4887 Loc Id's (4867), 41 Par.Id's (83), 2 Module Id's (4), 0% Misses. Waarom zijn er minder Parameter Id's en Module Instanties?
NB. Bij P-48 zijn er enkele decaden waarbij het debiet bij De Roode Vaart 0 m3/s is. Dit is door inhoudelijk expert Geert Prinsen gecontroleerd en in orde bevonden.
Test voor LSM Light zonder zout:
| Regio | Workflow | Testnummer | REF2015 | ||
|---|---|---|---|---|---|
| Uitvoering | T | P | |||
| Landelijk | LSM Light | ZW-LSMLT-T-11 | 13-09-2017 15:38:05 (T0: 2003) | | n.v.t. |
| Landelijk | LSM Light | ZW-LSMLT-P-46 | 13-09-2017 15:38:05 (T0: 2003) | n.v.t | |
| Landelijk | LSM Light | ZW-LSMLT-P-47 | 13-09-2017 15:38:05 (T0: 2003) | n.v.t | |
| Landelijk | LSM Light | ZW-LSMLT-P-47 | 13-09-2017 15:38:05 (T0: 2003) | n.v.t | |
Bij T-11: Er zijn meer Locatie Id's (1961/1723), Parameter Id's (25/19) en Module Instanties (4/3) dan in het testprotocol.
Bij P-47: Locatie "De aanvoerder" is niet te vinden (NB. de andere drie locaties wel).
Test voor NDB:
| Regio | Workflow | Testnummer | REF20151 | ||
|---|---|---|---|---|---|
| Uitvoering | T | P | |||
| Landelijk | NDB | ZW-NDB-T-11 | 13-09-2017 19:18:27 (T0: 2003) | | n.v.t. |
| NDB | ZW-NDB-P-11 | 13-09-2017 19:18:27 (T0: 2003) | n.v.t. | | |
| NDB | ZW-NDB-P-12 | 13-09-2017 19:18:27 (T0: 2003) | n.v.t. | | |
| NDB | ZW-NDB-P-13 | 13-09-2017 19:18:27 (T0: 2003) | n.v.t. | | |
| NDB | ZW-NDB-P-14 | 13-09-2017 19:18:27 (T0: 2003) | n.v.t. | | |
Bij T-11: Er zijn meer Locatie Id's (78/23) dan in het testprotocol.
Test voor LHM met zout:
| Regio | Workflow | Testnummer | REF2015 | ||
|---|---|---|---|---|---|
| Uitvoering | T | P | |||
| Landelijk | LHM | ZW-LHM-T-11 | 13-09-2017 21:12:00 (T0: 2003) | | n.v.t. |
| LHM | ZW-LHM-P-43 | 13-09-2017 21:12:00 (T0: 2003) | n.v.t. | | |
| LHM | ZW-LHM-P-45 | 13-09-2017 21:12:00 (T0: 2003) | n.v.t. | | |
| LHM | ZW-LHM-P-46 | 13-09-2017 21:12:00 (T0: 2003) | n.v.t. | | |
| LHM | ZW-LHM-P-47 | 13-09-2017 21:12:00 (T0: 2003) | n.v.t. | | |
| LHM | ZW-LHM-P-48 | 13-09-2017 21:12:00 (T0: 2003) | n.v.t. | | |
Bij T-11: Er zijn meer Locatie Id's (4912/4867), minder Parameter Id's (76/83), meer Module Instanties (6/4) en 0% Misses. Waarom zijn er minder Parameter Id's? NB.
Bij P-48 zijn er enkele decaden waarbij het debiet bij De Roode Vaart 0 m3/s is. Dit is door inhoudelijk expert Geert Prinsen gecontroleerd en in orde bevonden
Voor What-if testen voor LHM model zonder zout:
Op basis van het ZW-LMH-W2050S1Z0 model is het ZW-LMH-W2050S2Z0 model gegenereerd. Vervolgens is vergeleken of de resultaten idendiek zijn aan die van het ZW-LMH-W2050S2Z0 model; zie ZW-WHATIF-P-11.
| Regio | Workflow | Testnummer | REF2015 | ||
|---|---|---|---|---|---|
| Uitvoering | T | P | |||
| Landelijk | LHM | ZW-WHATIF-T-11 | 13-09-2017 20:02:06 (T0: 2003) | | n.v.t. |
| LHM | ZW-WHATIF-P-11 | 13-09-2017 20:02:06 (T0: 2003) | n.v.t. | | |
Voor testen van flexibiliteit in locaties:
| Regio | Workflow | Testnummer | REF2015 | ||
|---|---|---|---|---|---|
| Uitvoering | T | P | |||
| Landelijk | LSM Light | ZW-ADDLOC-T-11 | 00-00-00 00:00:00 (T0: 2003) | — | n.v.t. |
| LTM Light | ZW-ADDLOC-T-12 | 00-00-00 00:00:00 (T0: 2003) | — | n.v.t. | |
Stand van zaken van de testen per 15 september:
- Voor REF2015 werkt technisch gezien de hele modellentrein met LHM 3.3.0 i.p.v. LHM 3.0.2. Alle plausibiliteitstesten slagen met uitzondering van die voor de Roode Vaart. Dit zal op korte termijn uitgezocht worden.
- Voor WARM2050 moeten de workflows nog opgestart worden.
- De technische testen laten afwijkende aantallen zien ten opzichte van de aantallen in de testprotocollen. Dat is een bekend verschijnsel en trad ook op bij eerdere releases. In dit geval speelt mee dat er naar een nieuwe FEWS omgeving overgestapt is. Soms zijn de aantallen hoger en soms zijn de aantallen lager. Hiervoor zal z.s.m. een verklaring gezocht worden.
- AlleWhat-if testen slagen.
- De 'flexibiliteit in locaties' is nog niet getest, omdat de implementatie van deze functionaliteit nog niet afgerond is.
- Naar verwachting zal alle functionaliteit uiterlijk worden opgeleverd op 29 september, wat de deadline is voor release 2.0.0.0.
Release notes:
