...
Aan het NWM-testplan is een testprotocol voor het NDB-model toegevoegd. In eerste instantie is een bestaand NDB-scenario ingebouwd in NWM. Dit betreft het "LSM-light 2014" scenario, waarvoor de modelresultaten beschreven zijn in memo 1230058-001-ZWS00004 (van Frans Buschman en Edwin Snippen d.d. 31 mei 2016). Dit model heeft ongecorrigeerde afvoerreeksen. De simulatieperiode is 1-1-2001 t/m 1-1-2007. In het testprotocol wordt alleen het jaar 2003 beschouwd, omdat in september/oktober van 2003 een extreme situatie optrad met een enorme zoutindringing in het Noordelijk Deltabekkengebied. Op een drietal plaatsen (Krimpen aan den IJssel, Bernisse en Bergambacht) zijn de waterstanden en zoutconcentraties vergeleken. De resultaten moeten identiek zijn aan het bestaande NDB-scenario dat buiten NWM (stand-alone) heeft gedraaid, zie ook het protocol voor Configuratie update (groot).Zodra dit scenario succesvol is uitgevoerd, zullen de gecorrigeerde afvoerreeksen in het model gezet. Dan zullen de modelresultaten globaal beoordeeld worden op plausibiliteit, omdat er geen directe vergelijing meer mogelijk is met een bestaand scenario buiten het NWM. Met andere woorden, zijn de veranderingen in modelresultaten plausibel ten gevolge van de gewijzigde afvoeren? Is de zoutindringing vanuit zee hoger/lager, omdat de
riviereafvoeren lager/hoger zijn? Dit is geen onderdeel van deze release, waarbij alleen een zoutmodule NDB opgenomen zal worden in NWMDe functionaliteit die met dit onderdeel van de FAT release 1.3 getest wordt is of het inbouwen van een extra stap in de modeltrein correct werkt. Hierbij is het niet noodzakelijk dat dit met de gecorrigeerde afvoerreeks gebeurt. Het testprotocol is er op gericht of de workflow technisch correct draait en of resultaten buiten het NWM om binnen de FEWS-applicatie gereproduceerd kunnen worden met dezelfde invoer. Op dit moment wordt er gewerkt aan implementatie zoutmodule op basis van NDB-SOBEK-RE in een stand-alone branch. Hierbij wordt gerekend en getest met de resultaten uit release 1.1 en de analyses voor externe verzilting (fase 2 o.b.v. LSMLT afvoeren Hagestein, Tiel, Lith) om vergelijking met eerdere resultaten mogelijk te maken.
Toelichting voor de 'Vervanging van afvoerreeksen':
...
Figuur met geheugengebruik NA de opschoonacties
Stand van zaken van de testen:
...
: succesvol, met als voorbehoud de in de testprotocollen opgenomen known issues.
: niet succesvol- n.v.t.: niet gedefinieerd/niet voorzien
- —: nog niet uitgevoerd
Voor 'Vervanging van afvoerreeksen van Rijn en Maas':
...
| Regio | Workflow | Test nr | REF 2015 | W 2085 | ||||
|---|---|---|---|---|---|---|---|---|
| Uitvoering | T | P | Uitvoering | T | P | |||
| Landelijk | LSM Light | ZW-LSMLT-T-11 | 25-06-2016 16:16:45 (T0: 2003) | | n.v.t. | 27-06-2016 07:04:05 (T0: 2003) | 2) | n.v.t. |
| LSM Light | ZW-LSMLT-P-11 | 25-06-2016 16:16:45 (T0: 2003) | n.v.t. | | 27-06-2016 07:04:05 (T0: 2003) | n.v.t. | — 1) | |
| LSM Light | ZW-LSMLT-P-12 | 25-06-2016 16:16:45 (T0: 2003) | n.v.t. | | 27-06-2016 07:04:05 (T0: 2003) | n.v.t. | — 1) | |
| LHM | ZW-LHM-T-11 | 24-06-2016 16:17:17 (T0: 2003) | 3) | n.v.t. | 26-06-2016 17:23:26 (T0: 2003) | 3) | n.v.t. | |
| LHM | ZW-LHM-P-11 | 24-06-2016 16:17:17 (T0: 2003) | n.v.t. | | 26-06-2016 17:23:26 (T0: 2003) | n.v.t. | | |
| LHM | ZW-LHM-P-12 | 24-06-2016 16:17:17 (T0: 2003) | n.v.t. | | 26-06-2016 17:23:26 (T0: 2003) | n.v.t. | | |
| LHM | ZW-LHM-P-13 | 24-06-2016 16:17:17 (T0: 2003) | n.v.t. | | 26-06-2016 17:23:26 (T0: 2003) | n.v.t. | | |
| LTM Light | ZW-LTMLT-T-11 | 28-06-2016 13:04:28 (T0: 2003) | 4) | n.v.t. | 28-06-2016 13:05:00 (T0: 2003) | 4) | n.v.t. | |
| LTM Light | ZW-LTMLT-P-11 | 28-06-2016 13:04:28 (T0: 2003) | n.v.t. | | 28-06-2016 13:05:00 (T0: 2003) | n.v.t. | n.v.t. | |
| LTM Light | ZW-LTMLT-P-12 | 28-06-2016 13:04:28 (T0: 2003) | n.v.t. | | 28-06-2016 13:05:00 (T0: 2003) | n.v.t. | n.v.t. | |
| LTM Light | ZW-LTMLT-P-13 | 28-06-2016 13:04:28 (T0: 2003) | n.v.t. | n.v.t. | 28-06-2016 13:05:00 (T0: 2003) | n.v.t. | | |
| LTM Light | ZW-LTMLT-P-14 | 28-06-2016 13:04:28 (T0: 2003) | n.v.t. | n.v.t. | 28-06-2016 13:05:00 (T0: 2003) | n.v.t. | | |
...
1) Bij W2085 scenario's is geconstateerd dat WH scenario gebruikt is i.p.v. WHDRY scenario. Gecorrigeerde simulaties ( op basis van WHDRY) zijn inmiddels opgestart, maar die zijn nog niet voltooid. Daarom zijn tot nu toe alleen de T-testen uitgevoerd voor de W2085 scenario's.
...
3) Bij ZW_LHM_REF2015 is het aantal locaties id's (4872) fors verschillend van de waarde in de tabel Testwaarden Zoetwater (13472), omdat de database opgeschoond is (zie 'Verbetering van de NWM-performance'). Omdat alle andere parameters wel kloppen en er een verklaring voor het verschil is, is deze test goedgekeurd. De tabel met testwaarden is op dit onderdeel aangepast. De aanbeveling is om het testprotocol aan te passen en voortaan het maximale aantal te noemen.hanteren. Bij afwijking beoordeelt de test coordinator, in overleg met de ontwikkelaars, of het verschil klopt op basis van de doorgevoerde wijzigingen.
4) Bij ZW_LTMLT REF2015 zijn er meer locatie id's (277 om 262) en meer module instanties (7 om 4). Bij ZW_LTMLT W2085 zijn er meer locatie id's (277 om 262) en meer module instanties (9 om 4). Bij de ZW_LTLMT scenario's zijn er maximaal 13 module instanties. Het aantal kan varieren, wat van een aantal factoren waaronder de modelaanpassingen afhangt. Omdat het aantal module instanties in de te verwachten interval (tussen 4 en 13) ligt, zijn deze testen goedgekeurd. Aanbeveling: Het voorstel is om het protocol aan te scherpen op dit onderdeel en voortaan het maximale aantal te noemen. Bij afwijking beoordeelt de test coordinator, in overleg met de ontwikkelaars, of het verschil klopt op basis van de doorgevoerde wijzigingen.
NB. ZW-LSMLT-P13 en ZW-LSMLT-P14 zijn niet uitgevoerd, omdat dit een vergelijking is tussen LSM en LSM Light. Omdat de LSM scenario's niet gedraaid zijn met de gecorrigeerde afvoerreeksen, kunnen deze vergelijkingen nog niet uitgevoerd worden.
Voor 'zoutmodule Noordelijk Deltabekken model':
Voor de zoutmodule NDB -scenario's zijn nog geen succesvolle testen op de T-omgeving uitgevoerd. De testprotocollen zijn al wel toegevoegd aan de Wiki.
...