14.Beantwoording CDA; Stroomstoringen 2021
Tekst van het document
Fractie CDA Aan de heer S. van der Weg College van burgemeester en wethouders
Aan de fractie van de CDA Aaaa
datum
pagina
10 november 2022
1 van 3
aantal bijlagen
betreft
uw kenmerk
ons kenmerk
eenheid
behandelaar
22AAG00024
Informatievoorziening
M. Laghzaoui
Beantwoording vragen CDA Stroomstoring
Geachte heer, Incident Op zondag 19 september 2021 en op vrijdag 3 december 2021 zijn er stroomstoringen in het stadhuis ontstaan waardoor alle ICT-voorzieningen van de gemeente onbereikbaar werden. Dit betekende in de praktijk dat de gemeente telefonisch niet bereikbaar was en dat de gehele automatiseringsomgeving ontoegankelijk was voor de medewerkers. Klanten konden hierdoor niet aan de balie geholpen worden en niet telefonisch te woord worden gestaan. Voor de medewerkers betekende dit geen internet op de locaties, geen digitale werkplekken en geen e-mail verkeer. De website is al die tijd wel bereikbaar gebleven. Omdat Syntrophos het Shared Service Center (SSC) is voor de gemeenten Brielle, Hellevoetsluis, Nissewaard en Westvoorne, ondervonden de andere gemeenten op Voorne Putten dezelfde problemen. Vanaf het moment van de storing is onafgebroken gewerkt om de storing aan het netwerk op te lossen en zijn kort hierna alle processen hersteld en kon men weer gebruik maken van de omgevingen. Inleiding Het Datacenter in Spijkenisse met alle hierin ondergebrachte IT-componenten (hoofd netwerkcomponenten, servers en opslagcapaciteit, back-up voorzieningen en virtuele netwerk) zijn door stroomuitval (september en december) uitgevallen. Bij beide incidenten heeft het Datacenter Rockanje de diensten niet over kunnen nemen.
Alle componenten in het Datacenter Rockanje waren wel actief. Ze waren echter niet beschikbaar en bruikbaar voor de overname van de diensten van het Datacenter Spijkenisse. Dit werd veroorzaakt doordat de automatische schakeling, die bij uitval van de internetverbinding in het Datacenter Spijkenisse moet zorgen voor overgang naar Datacenter Rockanje, niet heeft gewerkt. Na diepgaande technische analyse is duidelijk geworden dat de oorzaak hiervan lag in een onvolledigheid in de configuratie. Doordat er volledige uitval van alle componenten in Datacenter
Postadres Postbus 25, 3200 AA Spijkenisse Bezoekadres Raadhuislaan 106, 3201 EL Spijkenisse Telefoon 14 0181 E-mail gemeente@nissewaard.nl www nissewaard.nl
datum
ons kenmerk
10 november 2022
pagina
betreft
2 van 3
Beantwoording vragen CDA Stroomstoring
Spijkenisse plaatsvond waren alternatieve schakelingen ook niet mogelijk. Door deze storing is Syntrophos tot de conclusie gekomen dat er op dit punt verbetering op de inrichting noodzakelijk is en deze is actief opgepakt en opgelost inmiddels. Tijdens het eerste incident was er minimaal effect op de beschikbaarheid van de dienstverlening van de gemeenten. Het incident vond op een zondag plaats. Maandagochtend was de omgeving hersteld. Het tweede incident vond plaats op een vrijdagochtend en heeft geleid tot een uitval van de dienstverlening van de gemeenten aan burgers en bedrijven. Hierbij zijn er o.a. noodgedwongen afspraken afgezegd. Schriftelijke vragen CDA 1. Is het juist dat de diepgaande technische analyse pas heeft plaatsgevonden na de stroomstoring van december? Antwoord: Dit is niet juist. Dit heeft direct plaatsgevonden na het incident in september 2021. Hierbij is aan het licht gekomen dat de ‘’Uninterruptible Power Supply’’ (UPS) niet heeft gewerkt. De afkorting UPS staat voor ‘’uninterruptible power supply’’, ook wel een ongebroken stroomvoorziening. De UPS wordt soms ook weleens aangeduid als een back-upbatterij. De UPS zorgt voor back-upstroom wanneer je gewone stroombron uitvalt of de spanning tot een onaanvaardbaar niveau daalt. Een UPS zorgt voor een veilige uitschakeling van de apparatuur.
De grootte en het ontwerp van een UPS bepalen hoe lang deze stroom levert. Je kunt de UPS dus ook wel zien als een soort noodoplossing tussen je hoofdstroomvoorziening en je noodstroomvoorziening. Vanwege de defecte UPS in Spijkenisse had het datacenter in Rockanje niet de kans gehad om het over te nemen. Echter is ook aan het licht gekomen dat de configuratie wat voor deze schakeling moest zorgen ook niet juist was ingesteld. 2. En als dat zo is, waarom is er niet voor gekozen om die analyse direct na de stroomstoring van september uit te voeren? Antwoord: zie antwoord bij vraag 1. U wijst in de memo op het BCM en het daarbij behorende draaiboek. Onderdeel van het draaiboek is, om na herstel van de dienstverlening een onderzoek naar de oorzaak te doen. 3. Is het BCM draaiboek na de september verstoring op dit punt niet gevolgd? Antwoord: zie antwoord bij vraag 1. Als oorzaak wordt gewezen op een onvolledigheid in de configuratie. 4. Is het niet gebruikelijk om na een configuratie, testen uit te voeren of de configuratie goed is uitgevoerd? Antwoord: Dit zou in het proces een normale actie zijn om de configuratie te testen. Dit is echter niet (voldoende) gebeurd bij Syntrophos. Er is wel een kanttekening gemaakt dat er niet eerder een zogenaamde ‘’door het donker test’’ is uitgevoerd. Deze live test is dé manier om de werking van een noodstroominstallatie te controleren.
Dit is de ultieme test, waarbij een netuitval wordt gesimuleerd.
Postadres Postbus 25, 3200 AA Spijkenisse Bezoekadres Raadhuislaan 106, 3201 EL Spijkenisse Telefoon 14 0181 E-mail gemeente@nissewaard.nl www nissewaard.nl
datum
ons kenmerk
10 november 2022
pagina
betreft
3 van 3
Beantwoording vragen CDA Stroomstoring
Dit is nu onderdeel geworden van het (standaard)testproces wat we in oktober 2022 jl., voor het laatst hebben doorlopen (met succes). De memo geeft aan dat de UPS nagenoeg direct na de stroomuitval ook is uitgevallen en daarmee het datacenter direct volledig zonder stroom kwam te staan. 5. Is dit geconstateerd na de stroomstoring van september of na de stroomstoring van december? Antwoord: Dit is geconstateerd na de stroomstoring van september 2021. 6. Heeft de vernieuwing van de UPS plaatsgevonden in de periode tussen beide stroomstoringen? Antwoord: Dit heeft plaatsgevonden in december 2021. Dit was ook de oorzaak van de stroomstoring in december. We zijn hierbij begeleid door meerdere externe partijen incl Syntrophos maar dit heeft onverhoopt toch tot een storing geleid. De memo wijst op de grote gevolgen van de stroomstoring in december. Een stroomstoring kan altijd en overal optreden en kan nooit helemaal worden voorkomen. Maar je kunt je daar wel goed op voorbereiden. 7. Deelt het College de mening van het CDA dat de gevolgen van de stroomstoring in december voor een aanzienlijk deel beperkt hadden kunnen worden als de diepgaande technische analyse direct na de stroomstoring van september was uitgevoerd? En als het College die mening niet deelt, waarom niet? Antwoord: Dit deelt het college niet omdat er al een diepgaande analyse heeft plaatsgevonden na september 2021.
Dit heeft ervoor gezorgd dat we adviezen en daarmee verbeteringen in december wilden uitvoeren wat helaas niet volgens plan is verlopen, ondanks de ingeschakelde expertise. Ook hiervan is geleerd en de meest recente ‘’door het donker test’’ waarbij de spanning volledig is uitgeschakeld is met succes doorlopen. Tevens is dit proces beter geborgd in de organisatie en zullen we periodieke testen volgen om ervoor te zorgen dat we de risico’s zo klein mogelijk houden.
Met vriendelijke groet, Namens de burgemeester en wethouders van de gemeente Nissewaard, De gemeentesecretaris de burgemeester
M.L.M. Weerts
F. van Oosten
Postadres Postbus 25, 3200 AA Spijkenisse Bezoekadres Raadhuislaan 106, 3201 EL Spijkenisse Telefoon 14 0181 E-mail gemeente@nissewaard.nl www nissewaard.nl