15.Memo Stroomstoringen sept + dec 2021

Memo aan

van

De Raad

Wethouder Chris Hottentot

datum

pagina

05-09-2022

1 van 2

Stroomstoringen September en December 2021 Incident Op zondag 19 september 2021 en op vrijdag 3 december 2021 zijn er stroomstoringen in het stadhuis ontstaan waardoor alle ICT voorzieningen van de gemeente onbereikbaar werden. Dit betekende in de praktijk dat de gemeente telefonisch niet bereikbaar was en dat de gehele automatiseringsomgeving ontoegankelijk was voor de medewerkers. Klanten konden hierdoor niet aan de balie geholpen worden en niet telefonisch te woord worden gestaan. Voor de medewerkers betekende dit geen internet op de locaties, geen digitale werkplekken en geen e-mail verkeer. De website is al die tijd wel bereikbaar gebleven. Omdat Syntrophos het Shared Service Center (SSC) is voor de gemeenten Brielle, Hellevoetsluis, Nissewaard en Westvoorne, ondervonden de andere gemeenten op Voorne Putten dezelfde problemen. Vanaf het moment van de storing is onafgebroken gewerkt om de storing aan het netwerk op te lossen en zijn kort hierna alle processen hersteld en kon men weer gebruik maken van de omgevingen. Inleiding Het Datacenter in Spijkenisse met alle hierin ondergebrachte IT-componenten (hoofd netwerkcomponenten, servers en opslagcapaciteit, back-up voorzieningen en virtuele netwerk) zijn door stroomuitval (september en december) uitgevallen. Bij beide incidenten heeft het Datacenter Rockanje de diensten niet over kunnen nemen.

Alle componenten in het Datacenter Rockanje waren wel actief. Ze waren echter niet beschikbaar en bruikbaar voor de overname van de diensten van het Datacenter Spijkenisse. Dit werd veroorzaakt doordat de automatische schakeling, die bij uitval van de internetverbinding in het Datacenter Spijkenisse moet zorgen voor overgang naar Datacenter Rockanje, niet heeft gewerkt. Na diepgaande technische analyse is duidelijk geworden dat de oorzaak hiervan lag in een onvolledigheid in de configuratie. Doordat er volledige uitval van alle componenten in Datacenter Spijkenisse plaatsvond waren alternatieve schakelingen ook niet mogelijk. Door deze storing is Syntrophos tot de conclusie gekomen dat er op dit punt verbetering op de inrichting noodzakelijk is en deze is actief opgepakt en opgelost inmiddels. Tijdens het eerste incident was er minimaal effect op de beschikbaarheid van de dienstverlening van de gemeenten. Het incident vond op een zondag plaats. Maandagochtend was de omgeving herstelt. Het tweede incident vond plaats op een vrijdagochtend en heeft geleid tot een uitval van de dienstverlening van de gemeenten aan burgers en bedrijven. Hierbij zijn er o.a. noodgedwongen afspraken afgezegd.

Postadres Postbus 25, 3200 AA Spijkenisse Bezoekadres Raadhuislaan 106, 3201 EL Spijkenisse Telefoon 14 0181 E-mail gemeente@nissewaard.nl www nissewaard.nl

datum

pagina

betreft

5 september 2022

2 van 2

Memo stroomstoringen

Verstoring & proces Bij een stroomuitval treden de ‘’Uninterruptible Power Supply’’ (UPS-Accu) en de noodstroomaggregaat (NSA) tegelijk op. De UPS (accu) heeft voor ongeveer 40 minuten stroom en kan de tijd ondervangen voordat het aggregaat in werking treedt. Omdat dit niet goed is gegaan is ook dit proces nader onderzocht. Feitelijk is vastgesteld dat het noodaggregaat na 1 minuut is aangeslagen (volgens proces) en stroomvoorziening in het stadhuis heeft overgenomen. Feitelijk is vastgesteld dat de UPS nagenoeg direct na de stroomuitval ook is uitgevallen en daarmee het datacenter direct volledig zonder stroom kwam te staan. Uit onderzoek door installateur is vastgesteld dat de UPS defect is gebleken en vernieuwd dient te worden (reeds gebeurd). BCM Op beide momenten heeft de gemeente teruggegrepen naar haar BCM draaiboek (BCM staat voor business continuity management). In dit proces leg je de stappen vast middels een draaiboek. Dit draaiboek zorgt er mede voor dat de gemeente na een calamiteit snel en efficiënt kan reageren, met vooraf gedefinieerde rollen en taken. Efficiënt houdt hierbij in, dat het herstel van de dienstverlening voorop staat en dat onderzoek naar oorzaken ook later kan gebeuren.

In een later stadium kan het bestuur zich dan richten op de vraag waarom de calamiteit heeft plaatsgevonden en kan er besloten worden maatregelen door te voeren om herhaling te voorkomen. Hierbij wordt gebruik gemaakt van de in het ‘Business Continuity Management Strategie’ document beschreven BCM-plan. Deze methodiek maakt het mogelijk de draaiboeken steeds aan te passen aan de actuele situatie, waardoor er bij een calamiteit steeds snel en efficiënt gereageerd kan worden. Één van de acties uit het BCM-plan is bijvoorbeeld geweest dat de paspoorten van burgers zijn thuisbezorgd omdat de systemen op het stadhuis niet werkte. Verbeterpunten Nederland kent een relatief betrouwbaar elektriciteitsnet. In verhouding tot andere West-Europese landen is sprake van een hoge beschikbaarheid en dus ook van een geringe uitval. Toch komen storingen in de elektriciteitsvoorziening regelmatig voor. Omdat elektriciteit in toenemende mate van belang is voor de continuïteit van de samenleving, en dus ook voor de bedrijfsvoering van de gemeente voor haar burgers, heeft een onderbreking van de elektriciteitsvoorziening direct grote consequenties voor de getroffen aansluitingen. De UPS is inmiddels met succes vervangen en ook zijn er afspraken gemaakt om deze 2x per jaar te testen/een scenario te simuleren. Door dit periodiek te testen willen we de kans op herhaling minimaliseren.