You are viewing an old version of this page. View the current version.

Compare with Current View Page History

« Previous Version 64 Next »

In deze sectie staan de testbevindingen voor release 1.4.0.0 (VERSIE 1 NOVEMBER 2016). In de sprint van 17 t/m 28 oktober is hieraan gewerkt.

Pre-conditie voor het uitvoeren van een workflow is dat alle voorgaande workflows, als onderdeel van een serie workflows met afhankelijkheid van invoerdata, succesvol zijn afgerond. In de testbevindingen kan het voorkomen dat een tussenliggende workflow later opnieuw is uitgevoerd om een specifieke verbetering te testen. Indien zo'n verbetering impact heeft op de vervolg workflows, dan zijn ook deze workflows opnieuw getest.

 

Samenvatting en conclusie

Aanleding voor deze release is het toevoegen van vier workflows, te weten:

  • 100-jaar WABES-reeks voor REF2015S1Z0
  • 100-jaar WABES-reeks voor WARM2050S1Z0
  • 100-jaar WABES-reeks voor REF2015S2Z0
  • 100-jaar WABES-reeks voor WARM2050S2Z0

Omdat deze workflows zonder zout rekenen, is "Z0" aan de workflownamen toegevoegd.Er worden drie sporen onderscheiden, waarvan de laatste twee in deze release gerealiseerd zijn:

  • "S0" correspondeert met de 26-jarige basisprognose
  • "S1" correspondeert met de "V0 WABES schematisatie" waaraan 100-jaar tijdreeksen zijn toegevoegd.
  • "S2" correspondeert met de "V1 WABES schematisatie" waaraan 100-jaar tijdreeksen zijn toegevoegd.  In de "V1 WABES schematisatie" zijn de volgende drie maatregelen toegevoegd: "uitbreiding van model met de Rode Vaart uitbreiding", een "Flexibel Peil IJsselmeer-Markermeer" en een "aanpassing van capaciteit KWA-15 (stap 1)".

De 100-jaar simulaties zijn van 1911 t/m 2011. NB. De S0-basisprognoses zijn van 1981 t/m 2011. In deze 1.4.0.0 release zijn alleen de modelschematies LHM uitgebreid met workflows op basis van de 100-jaar WABES-reeks. In release 1.4.1.0 van medio november zal dit voor LSMLT gerealiseerd worden. NB. Voor de andere schematisaties in NWM (NDB, LTM, LTMLT) zal dit in de verdure toekomst gerealiseerd worden. Alle uitbreidingen hebben betrekking op de 'testprotocollen Zoetwater'. Er zijn geen uitbreidingen voor de 'testprotocollen Veiligheid'.NB. De "S0" workflows hebben eigen uitvoerlocaties, die qua aantal en locatie daarom deels zullen verschillen. 

Alle technische en plausibiliteitstesten voor de vier nieuwe workflows zijn met success uitgevoerd.

 

 

Aanpassingen van het testprotocol voor release 1.4.0.0

Het testprotocol is uitgebreid op de volgende onderdelen:

  • Check of de debieten in LHM en LSMLT op nabij gelegen rekenpunten overeenkomen  met de debieten die aangeleverd zijn voor Monsin en Lobith. Dit dient getest te worden voor alle vier de workflows.
  • Check of de debieten bij Hagestein in een bepaald jaar tussen 1981-2006 - namelijk voor 2003 - overeenkomen met de waarden uit de basisprognose. Check dit voor LHM en LSMLT voor het jaar 2003. Door de verandering in o.a. de regenval en de verdamping mogen en kleine verschillen optreden. Op basis van expert judgement bepalen of de resultaten acceptabel zijn.
  • Check of de zeespiegelstijging correct zijn doorgevoerd in LHM en LSMLT. 
  • Check of de maatregelen doorkomen in het system in LHM en LSMLT.NB.

In deze sprint zijn ook testen voor LSMLT toegevoegd aan het testprotocol, maar deze testen zijn nog niet uitgevoerd, omdat pas in een volgende sprint workflows voor LSMLT toegevoegd zullen worden.

   

 

Nieuwe testprotocollen

In de huidige testprotocollen is steeds het jaar 2003 gekozen voor de testen. Voor de nieuwe testprotocollen wordt naast 2003 ook voor de jaren 1911, 1912 en 2011 testen uitgevoerd. Voor LHM en LSMLT zijn de volgende testen toegevoegd:
Voor REF2015S1(Z0):

  • (ZW-LHM-P-41 t/m 44 / ZW-LSMLT-P-41 t/m 44) Plausibiliteitstest voor bovenstroomse afvoer bij Monsin en Lobith voor 1911, 1912, 2003 en 2011
  • (ZW-LHM-P-45 / ZW-LSMLT-P-45) Plausibiliteitstest m.b.t. het debiet bij Hagestein.

Voor WARM2050S1(Z0):

  • (ZW-LHM-P-51 t/m 54 / ZW-LSMLT-P-51 t/m 54) Plausibiliteitstest voor bovenstroomse afvoer bij Monsin en Lobithvoor 1911, 1912, 2003 en 2011
  • (ZW-LHM-P-55 / ZW-LSMLT-P-55) Plausibiliteitstest het debiet bij Hagestein.

Voor REF2015S2(Z0):

  • (ZW-LHM-P-46 / ZW-LSMLT-P-46) Plausibiliteitstest voor Flexibel Pijl IJsselmeer-Markermeer
  • (ZW-LHM-P-47 / ZW-LSMLT-P-47) Plausibiliteitstest voor KWA-15
  • (ZW-LHM-P-48 / ZW-LSMLT-P-48) Plausibiliteitstest voor Roode Vaart
  • (ZW-LSMLT-P-49) Plausibiliteitstest zeespiegel(rijzing) voor benedenstroomse waterstanden bij open rand Maasmond (=locatie Hoek van Holland); Voor REF2015 vergelijk met basisprognoses

Voor WARM2050S2(Z0):

  • (ZW-LHM-P-56 / ZW-LSMLT-P-56) Plausibiliteitstest voor Flexibel Pijl IJsselmeer-Markermeer
  • (ZW-LHM-P-57 / ZW-LSMLT-P-57) Plausibiliteitstest voor KWA-15
  • (ZW-LHM-P-58 / ZW-LSMLT-P-58) Plausibiliteitstest voor Roode Vaart
  • (ZW-LSMLT-P-59) Plausibiliteitstest zeespiegel(rijzing) voor benedenstroomse waterstanden bij open rand Maasmond (=locatie Hoek van Holland); Voor WARM2050 check op + 40 cm.

NB. Bij de workflow is "Z0" tussen haken gezet, omdat in deze release de workflows zonder zout zijn doorgerekend, maar in de toekomst dit ook met zout uitgevoerd zal worden.  

 

Testbevindingen

Onderstaande tabel bevat resultaten van de technische en plausibiliteit testen voor Zoetwater.
De kolommen hebben de volgende betekenis:

  • REF: referentie
  • R: Rust
  • D: Druk
  • W: Warm
  • S: Stoom
  • T: technische testen
  • P: plausibiliteit testen
  • uitvoering: datum/tijdstip van uitvoering workflow op T-omgeving

De resultaten van de testen hebben de volgende betekenis:

  • (tick): succesvol, met als voorbehoud de in de testprotocollen opgenomen known issues.
  • (error): niet succesvol
  • n.v.t.: niet gedefinieerd/niet voorzien
  • —: niet uitgevoerd

 

 Bij de testnummers staan twee nummers vermeld; de eerste geldt voor REF2015S1 en de tweede voor WARM20150S1.

Bij de plausibiliteitstesten waarin voor debieten de opgelegde randvoorwaarden en modelresutaten vergeleken zijn, is het verschil (in percentages) bijgevoegd. De geteste locaties ligt weliswaar erg dicht bij de open randen, maar niet exact op de locatie van de open randen. Ook kunnen tussenliggende lozingen en processen als neerslag en verdamping een (klein) verschil veroorzaken. Hierdoor zullen de berekende modeldebieten niet exact gelijk zijn aan de randvoorwaarden, maar moet er een zeer grote overeenkomst zijn. Deze verschillen blijken in de orde van 0 a 6% te liggen. Deze verschillen zijn zo klein dat geconcludeerd kan worden dat de juiste randvoorwaarden zijn toegepast in de modellen.

RegioWorkflowTestnummer WABES REF2015S1WABES WARM2050S1 
   UitvoeringT PUitvoering TP 
 LandelijkLHM ZW-LHM-T-1118-10-2016 13:05:40 (T0: 2003)(tick)n.v.t.18-10-2016 18:07:11 (T0: 2003)(tick)n.v.t.
 LHM  ZW-LHM-P-41/5119-10-2016 11:03:39 (T0: 1911) n.v.t.(tick) (2.5%)17-10-2016 16:59:15 (T0: 1911)n.v.t.(tick) (4.6%)
 LHM  ZW-LHM-P-42/5219-10-2016 22:55:30 (T0: 1912) n.v.t.(tick) (1.1%)18-10-2016 05:36:52 (T0: 1912)n.v.t.(tick) (2.8%)
 LHM  ZW-LHM-P-43/5318-10-2016 13:05:40 (T0: 2003) n.v.t.(tick) (3.3%)18-10-2016 18:07:11 (T0: 2003)n.v.t.(tick) (6.6%)
 LHM  ZW-LHM-P-44/5419-10-2016 00:23:55 (T0: 2011) n.v.t.(tick) (2.7%)19-10-2016 06:06:03 (T0: 2011)n.v.t.(tick) (4.7%)
 LHM  ZW-LHM-P-45/5518-10-2016 13:05:40 (T0: 2003) n.v.t.(tick)18-10-2016 18:07:11 (T0: 2003)n.v.t.(tick)

 

 

RegioWorkflowTestnummer WABES REF2015S2WABES WARM20502 
   UitvoeringT PUitvoering TP 
 LandelijkLHM ZW-LHM-T-1119-10-2016 20:54:21 (T0: 2003)(tick) n.v.t.18-10-2016 17:50:23 (T0: 2003)(tick)  n.v.t.
 LHM  ZW-LHM-P-43/5327-10-2016 16:06:13 (T0: 2003) n.v.t.(tick) (3.3%)27-10-2016 16:07:08 (T0: 2003)n.v.t. (tick) (6.6%)
 LHM  ZW-LHM-P-45/5527-10-2016 16:06:13 (T0: 2003) n.v.t.(tick)27-10-2016 16:07:08 (T0: 2003)n.v.t.(tick)
 LHM  ZW-LHM-P-46/5627-10-2016 16:06:13 (T0: 2003) n.v.t.(tick)27-10-2016 16:07:08 (T0: 2003)n.v.t.(tick)
 LHM  ZW-LHM-P-47/5727-10-2016 16:06:13 (T0: 2003) n.v.t.(tick)27-10-2016 16:07:08 (T0: 2003)n.v.t.(tick)
 LHM  ZW-LHM-P-48/5827-10-2016 16:06:13 (T0: 2003) n.v.t.(tick) 127-10-2016 16:07:08 (T0: 2003)n.v.t.(tick)1

 

1Bij de Roode Vaart blijkt de bijbehorende uitvoerlocatie niet beschikbaar te zijn. Daarom is voor test ZW-LHM-P-48/58 een work-around toegepast waarbij het debiet door de Roode Vaart via een hulpprgramma uit de uitvoerfile gehaald zijn.

 

 

  • No labels

Disclaimer