Onderstaand testprotocol is van toepassing op de volgende workflows voor het runnen van het LHM model en het exporteren van de native LHM resultaten naar de OPeNDAP server:
- ZW_LHM_REF2015S0
- ZW_LHM_D2050S0
- ZW_LHM_D2085S0
- ZW_LHM_R2050S0
- ZW_LHM_R2085S0
- ZW_LHM_S2050S0
- ZW_LHM_S2085S0
- ZW_LHM_W2050S0
- ZW_LHM_W2085S0
Deze workflows zijn zichtbaar in de "Interactive Forecast" en "Topology" schermen als "LHM".
De LHM testen bestaan uit de volgende onderdelen:
Technisch
Nr. | Test instructies en verwacht resultaat | Goed | Fout |
---|---|---|---|
ZW-LHM-T-11 | Voer de standaard test Model workflow uit, waarbij de volgende stappen uitgevoerd dienen te worden onder nr 1:
Check dat alle onderdelen in de standaard test succesvol zijn. |
Plausibiliteit
Onderstaand testprotocol dient voor het LHM model in ieder geval uitgevoerd te worden voor de volgende workflow:
- ZW_LHM_REF2015S0
Daarnaast wordt aangeraden om, door middel van een steekproef uit alle mogelijke scenario's, het testprotocol ook uit te voeren voor ten minste
één workflow voor een toekomstscenario, bijvoorbeeld:
- ZW_LHM_W2085S0
Hieronder is voor elke T0 gespecificeerd in Testwaarden Zoetwater een apart testprotocol opgenomen.
Test 1
Nr. | Test instructies en verwacht resultaat | Goed | Fout | ||||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
ZW-LHM-P-11 | Open de "Database Viewer" (toetscombinatie: F12 J vanuit het "Kaart" window) en Check dat een winterpeil en een zomerpeil zichtbaar is in de waterstand; het zomerpeil wordt | ||||||||||||||
ZW-LHM-P-12 | Open de "Database Viewer" (toetscombinatie: F12 J vanuit het "Kaart" window) en Check dat de ruimtelijke figuren kwalitatief overeenkomen met onderstaande screenshots. | ||||||||||||||
ZW-LHM-P-13 | Open de "Database Viewer" (toetscombinatie: F12 J vanuit het "Kaart" window) en
Check voor de verschillende scenario'sof het debiet op deze takken 0 of negatief is op de eerstvolgende decade (lees: een decade later) na de onderstaande decade. Let op: deze check geldt niet voor LHM zonder zout.
|
Screenshots
waterstand | ||
---|---|---|
GLG | ||
droogteschade |
Test 2 (voor het jaar 1998)
Opmerking: Onderstaande testen zijn gebaseerd op een berekening binnen en buiten Delft-FEWS. De runs buiten Delft-FEWS zijn te vinden op de NHI testserver onder de volgende directories
- s:\runs\NWM_2015\TEST0_referentie_1998\
- s:\runs\NWM_2015\TEST0_warm2085_1998\
of op de P-schijf bij Deltares in de volgende bestanden
P:\1209387-natwatermodel\ZW\archive\T\LHM-plausibiliteitstesten\ZW_LHM_199901010000_DTDMMC00_000068135_REF2015S0.zip
- P:\1209387-natwatermodel\ZW\archive\T\LHM-plausibiliteitstesten\ZW_LHM_199901010000_DTDMMC00_000071870_W2085S0.zip
Deze runs moeten worden uitgevoerd door een expert op het gebied van NHI.
Nr. | Test instructies en verwacht resultaat | Goed | Fout |
---|---|---|---|
ZW-LHM-P-21 | Selecteer in de "Interactive" tab de uit te voeren workflow en voer de volgende stappen uit:
Start vervolgens de workflow. De rekentijd staat vermeld in de tabel met Testwaarden Zoetwater. Check dat de workflow succesvol is beëindigd zonder errors in het "Logs" window. | ||
ZW-LHM-P-22 | Vergelijk de uitkomsten van de workflow met de waarden van de testdataset voor de parameter Check of het verschil tussen de waarden van de twee datasets niet meer dan 1 cm bedraagt. | ||
ZW-LHM-P-23 | Vergelijk de uitkomsten van de workflow met de waarden van de testdataset voor de parameter Check of het verschil tussen de waarden van de twee datasets niet meer dan 0,1 m3 bedraagt. Check of de parameter in beide datasets gedurende deze periode maximaal is. | ||
ZW-LHM-P-24 | Vergelijk de uitkomsten van de workflow met de waarden van de testdataset voor de parameter Check of het verschil tussen de waarden van de twee datasets niet meer dan 1 kg bedraagt. Check of de parameter in beide datasets gedurende deze periode maximaal is. | ||
ZW-LHM-P-25 | Vergelijk de uitkomsten van de workflow met de waarden van de testdataset voor het Check of het verschil in peilverloop niet meer dan 1 cm bedraagt. |
Test 3 (voor het jaar 2003)
Opmerking: Onderstaande testen zijn gebaseerd op een berekening binnen en buiten Delft-FEWS. De runs buiten Delft-FEWS zijn te vinden op de NHI testserver onder de volgende directories
- s:\runs\NWM_2015\TEST0_referentie_2003\
- s:\runs\NWM_2015\TEST0_warm2085_2003\
of op de P-schijf bij Deltares in de volgende bestanden
P:\1209387-natwatermodel\ZW\archive\T\LHM-plausibiliteitstesten\ZW_LHM_200401010000_DTDMMC00_000069648_REF2015S0.zip
- P:\1209387-natwatermodel\ZW\archive\T\LHM-plausibiliteitstesten\ZW_LHM_200401010000_DTDMMC00_000071871_W2085S0.zip
Deze runs moeten worden uitgevoerd door een expert op het gebied van NHI.
Nr. | Test instructies en verwacht resultaat | Goed | Fout |
---|---|---|---|
ZW-LHM-P-31 | Selecteer in de "Interactive" tab de uit te voeren workflow en voer de volgende stappen uit:
Start vervolgens de workflow. De rekentijd staat vermeld in de tabel met Testwaarden Zoetwater. Check dat de workflow succesvol is beëindigd zonder errors in het "Logs" window. | ||
ZW-LHM-P-32 | Vergelijk de uitkomsten van de workflow met de waarden van de testdataset voor de parameter Check of het verschil tussen de waarden van de twee datasets niet meer dan 1 cm bedraagt. | ||
ZW-LHM-P-33 | Vergelijk de uitkomsten van de workflow met de waarden van de testdataset voor de Check of het verschil tussen de waarden van de twee datasets niet meer dan 1 mm bedraagt. | ||
ZW-LHM-P-34 | Vergelijk de uitkomsten van de workflow met de waarden van de testdataset voor de parameter Check of het verschil tussen de waarden van de twee datasets niet meer dan 0,1 m3 bedraagt. Check of de parameter in beide datasets gedurende deze periode maximaal is. | ||
ZW-LHM-P-35 | Vergelijk de uitkomsten van de workflow met de waarden van de testdataset voor het
Check of het verschil tussen de waarden van de twee datasets niet meer dan 0,1 m3/s bedraagt. | ||
ZW-LHM-P-36 | Vergelijk de uitkomsten van de workflow met de waarden van de testdataset voor het Check of het verschil in peilverloop niet meer dan 1 cm bedraagt. |
Test 4 (voor de jaren 1911, 1912, 2003 en 2011)
Opmerking: In de onderstaande testen wordt soms vergeleken met debieten buiten Delft-FEWS. Deze debieten worden vergeleken met waterstanden en debieten die in een Excel-file gespecificeerd zijn. Deze Excel file is vinden op de p-schijf bij Deltares onder:
- P:\1209387-natwatermodel\ZW\archive\T\LHM-plausibiliteitstesten:\runs\NWM_2016\XXXX voor tijdreeks met dagwaarden van debieten
Nr. | Test instructies en verwacht resultaat | Goed | Fout |
---|---|---|---|
ZW-LHM-P-41 | Vergelijk voor REF2015S1 voor 1911 de takdebieten in de volgende crosssecties met de aangeleverde waarden in de Excel file:
Check of deze waarden goed overeenkomen. NB. Een (klein) verschil is mogelijk, omdat de takdebieten op enige afstand van de open randen liggen en processen zoals lozingen en neerslag tot een (kelin) verschil kunnen leiden. De Excel file is op dagbasis, terwijl de uitvoer op decade basis is. Daarom dient handmatig in de Excel-file een aantal waarden voor decades bepaald te worden. Dit dient vergeleken te worden met de bovengenoemde modelresultaten. Check de eerste vier decaden (t/m 11 febr.) en bereken het gemiddelde verschil. | ||
ZW-LHM-P-42 | Vergelijk voor REF2015S1 voor schrikkeljaar 1912 de takdebieten in de volgende crosssecties met de aangeleverde waarden in de Excel file:
Check of deze waarden goed overeenkomen. NB. Een (klein) verschil is mogelijk, omdat de takdebieten op enige afstand van de open randen liggen en processen zoals lozingen en neerslag tot een (kelin) verschil kunnen leiden. De Excel file is op dagbasis, terwijl de uitvoer op decade basis is. Daarom dient handmatig in de Excel-file een aantal waarden voor decades bepaald te worden. Dit dient vergeleken te worden met de bovengenoemde modelresultaten. Check de eerste vier decaden (t/m 11 febr.) en bereken het gemiddelde verschil. | ||
ZW-LHM-P-43 | Vergelijk voor REF2015S1 voor 2003 de takdebieten in de volgende crosssecties met de aangeleverde waarden in de Excel file:
Check of deze waarden goed overeenkomen. NB. Een (klein) verschil is mogelijk, omdat de takdebieten op enige afstand van de open randen liggen en processen zoals lozingen en neerslag tot een (kelin) verschil kunnen leiden. De Excel file is op dagbasis, terwijl de uitvoer op decade basis is. Daarom dient handmatig in de Excel-file een aantal waarden voor decades bepaald te worden. Dit dient vergeleken te worden met de bovengenoemde modelresultaten. Check de eerste vier decaden (t/m 11 febr.) en bereken het gemiddelde verschil. | ||
ZW-LHM-P-44 | Vergelijk voor REF2015S1 voor 2011 de takdebieten in de volgende crosssecties met de aangeleverde waarden in de Excel file:
Check of deze waarden goed overeenkomen. NB. Een (klein) verschil is mogelijk, omdat de takdebieten op enige afstand van de open randen liggen en processen zoals lozingen en neerslag tot een (kelin) verschil kunnen leiden. De Excel file is op dagbasis, terwijl de uitvoer op decade basis is. Daarom dient handmatig in de Excel-file een aantal waarden voor decades bepaald te worden. Dit dient vergeleken te worden met de bovengenoemde modelresultaten. Check de eerste vier decaden (t/m 11 febr.) en bereken het gemiddelde verschil. | ||
| |||
ZW-LHM-P-45 | Vergelijk voor REF2015S1 voor 2003 de debieten bij Hagestein met REF2015S0 Check op basis van expert judgement of trends per seizoen overeenkomen. ToDo: VOEG EXCEL FIGUUR TOE | ||
ZW-LHM-P-46 | Beoordeel voor REF2015S2 waterstand op het IJsselmeer en Veluwerandmeer Check of het flexibele meerpeil voor het IJsselmeer (locatie xx) correct is. Controleer of de waterstand van 1 naar 11 maart met 25 cm is toegenomen. Check of het flexibele meerpeil voor het Velumerandmeer (locatie xx) correct is. Controleer of de waterstand van 1 naar 11 maart met 15cm is toegenomen. <plaatje Carine toevoegen>> | ||
ZW-LHM-P-47 | Beoordeel voor REF2015S2 Capaciteit KWA-15 (stap 1) Check of in de zomer 2003 bij Bodegraven (locatie id "DMTakken_NHI30_DMTak_4070", locatienaam "Oude Rijn") een takdebiet van 10,5 m3/s optreedt. | ||
ZW-LHM-P-48 |
Beoordeel voor REF2015S2 maatregel Roode Vaart Check of in een droge periode (zomer 2003) het debiet voor Oosterhout (locatie id "DMTakken_NHI30_DMTak_5024, locatie " Markduiker & Marksluis") en Roode Vaart (locatie id "DMTakken_NHI30_DMTak_50211") tezamen maximaal 9 m/s bedraagt, waarvan ongeveer 20% door de Roode Vaart stroomt en ongeveer 80% bij Oosterhout. | ||
| |||
ZW-LHM-P-51 | Vergelijk voor WARM2050S1 voor 1911 de takdebieten in de volgende crosssecties met de aangeleverde waarden in de Excel file:
Check of deze waarden goed overeenkomen. NB. Een (klein) verschil is mogelijk, omdat de takdebieten op enige afstand van de open randen liggen en processen zoals lozingen en neerslag tot een (kelin) verschil kunnen leiden. De Excel file is op dagbasis, terwijl de uitvoer op decade basis is. Daarom dient handmatig in de Excel-file een aantal waarden voor decades bepaald te worden. Dit dient vergeleken te worden met de bovengenoemde modelresultaten. Check de eerste vier decaden (t/m 11 febr.) en bereken het gemiddelde verschil. | ||
ZW-LHM-P-52 | Vergelijk voor WARM2050S1 voor schrikkeljaar 1912 de takdebieten in de volgende crosssecties met de aangeleverde waarden in de Excel file:
Check of deze waarden goed overeenkomen. NB. Een (klein) verschil is mogelijk, omdat de takdebieten op enige afstand van de open randen liggen en processen zoals lozingen en neerslag tot een (kelin) verschil kunnen leiden. De Excel file is op dagbasis, terwijl de uitvoer op decade basis is. Daarom dient handmatig in de Excel-file een aantal waarden voor decades bepaald te worden. Dit dient vergeleken te worden met de bovengenoemde modelresultaten. Check de eerste vier decaden (t/m 11 febr.) en bereken het gemiddelde verschil. | ||
ZW-LHM-P-53 | Vergelijk voor WARM2050S1 voor 2003 de takdebieten in de volgende crosssecties met de aangeleverde waarden in de Excel file:
Check of deze waarden goed overeenkomen. NB. Een (klein) verschil is mogelijk, omdat de takdebieten op enige afstand van de open randen liggen en processen zoals lozingen en neerslag tot een (kelin) verschil kunnen leiden. De Excel file is op dagbasis, terwijl de uitvoer op decade basis is. Daarom dient handmatig in de Excel-file een aantal waarden voor decades bepaald te worden. Dit dient vergeleken te worden met de bovengenoemde modelresultaten. Check de eerste vier decaden (t/m 11 febr.) en bereken het gemiddelde verschil. | ||
ZW-LHM-P-54 | Vergelijk voor WARM2050S1 voor 2011 de takdebieten in de volgende crosssecties met de aangeleverde waarden in de Excel file:
Check of deze waarden goed overeenkomen. NB. Een (klein) verschil is mogelijk, omdat de takdebieten op enige afstand van de open randen liggen en processen zoals lozingen en neerslag tot een (kelin) verschil kunnen leiden. De Excel file is op dagbasis, terwijl de uitvoer op decade basis is. Daarom dient handmatig in de Excel-file een aantal waarden voor decades bepaald te worden. Dit dient vergeleken te worden met de bovengenoemde modelresultaten. Check de eerste vier decaden (t/m 11 febr.) en bereken het gemiddelde verschil. | ||
| |||
ZW-LHM-P-55 | Beoordeel de debieten bij Hagestein met REF2015SX Check op basis van expert judgement of trends per seizoen overeenkomen. Check hierbij of voor S1 de waterstand met 40 cm is toegenomen ToDo: VOEG EXCEL FIGUUR TOE | ||
| |||
ZW-LHM-P-56 | Beoordeel voor WARM2050S2 de waterstand op het IJsselmeer Check of het flexibele meerpeil voor het IJsselmeer correct is. Controleer of de waterstand van 1 naar 11 maart met 25 cm is toegenomen | ||
ZW-LHM-P-57 | Beoordeel voor WARM2050S2 de KWA-15 capaciteit (stap 1) Check voor de zomer of <<zie e-mail Carine; dit specifieker maken>> | ||
ZW-LHM-P-58 |
Beoordeel voor WARM2050S2 de maatregel Roode Vaart Check of <<zie e-mail Carine; nog onduidelijk hoe we dit specifiek kunnen maken>> |