Vrodex - Web en email server offline door storing in datacenter – Incident details

Web en email server offline door storing in datacenter

Resolved
Major outage
Started 10 days agoLasted about 17 hours

Affected

Platform availability

Operational from 4:00 AM to 7:29 PM, Major outage from 7:29 PM to 8:42 PM

Vrodex Bookings

Operational from 4:00 AM to 7:29 PM, Major outage from 7:29 PM to 8:42 PM

Webhosting & Email

Major outage from 4:00 AM to 8:42 PM

Email

Major outage from 4:00 AM to 8:42 PM

Webhosting

Major outage from 4:00 AM to 8:42 PM

Updates
  • Resolved
    UTC
    Resolved

    Alle diensten zijn nu weer online.

  • Update
    UTC
    Update

    Er is zojuist toegang verleend tot het data center. De servers worden momenteel geïnspecteerd en zo snel mogelijk weer online gebracht.

  • Update
    UTC
    Update

    Update van de provider: De temperatuur van het gekoelde water is gestabiliseerd. Technici en leveranciers van de faciliteit zetten de herstelwerkzaamheden voort om het lek in het gekoelde water op de tweede verdieping te lokaliseren en te verhelpen. Tijdelijke koelunits zijn ingezet om de koeling te ondersteunen en er worden extra units naar de locatie gebracht. De wateropruiming op alle getroffen verdiepingen is nog gaande. Het brandbeveiligingssysteem van het gebouw is momenteel buiten werking en het onderzoek loopt nog.

  • Update
    UTC
    Update

    De koelinstallaties worden geleidelijk weer in gebruik genomen en de temperaturen in het datacenter beginnen te dalen. Er bevindt zich echter nog steeds water op belangrijke plekken in de datacentervloer en om elektrische veiligheidsredenen kan de apparatuur nog niet opnieuw ingeschakeld worden. Zodra onze leverancier bevestigt dat het veilig is en de stroomvoorziening is hersteld wordende diensten weer online gebracht. Helaas hebben we nog geen schatting van de tijdsduur en ligt de situatie buiten onze controle. We zullen updates blijven geven zodra er meer informatie beschikbaar is.

  • Update
    UTC
    Update

    Update over het datacenter: technici en de leverancier van de koelinstallatie zetten de herstelwerkzaamheden voort, waarbij de testruns van de koelinstallatie nog steeds gaande zijn. Ook de leverancier van het brandbeveiligingssysteem werkt aan de herstelwerkzaamheden.

  • Update
    UTC
    Update

    Een update voor Vrodex Bookings & Vrodex Online orders gebruikers: wij hebben een redirect ingesteld voor jullie hoofddomein naar de online bestelpagina en reserveringspagina. Hierdoor kunnen bezoekers nog steeds reserveren en bestellen.

  • Update
    UTC
    Update

    Een nieuwe update vanuit het datacenter: de herstelwerkzaamheden zijn nu gericht op het weer online brengen van het koelsysteem. Technici en de leverancier van de koelinstallatie voeren actief testruns uit, terwijl mobiele ontvochtigers in de hele faciliteit in gebruik blijven. We hebben nog geen bevestigde termijn voor de oplossing en zullen updates blijven geven zodra deze beschikbaar zijn.

  • Update
    UTC
    Update

    Een nieuwe update vanuit het datacenter: het bijvullen van de buffertank is voltooid en technici hebben met succes twee waterpompen opgestart. De eerste koelmachine wordt momenteel in gebruik genomen en er worden testruns uitgevoerd. Mobiele ontvochtigers blijven in werking. De herstelwerkzaamheden met de leveranciers van de koelmachine en het brandbeveiligingssysteem worden voortgezet. We hebben nog geen definitieve planning voor de oplossing en zullen updates blijven geven zodra deze beschikbaar zijn.

  • Update
    UTC
    Update

    Een nieuwe update vanuit het datacenter: het bijvullen van de koelinstallatie en de buffertanks is nog steeds gaande. Eén buffertank is nu volledig bijgevuld en de tweede wordt momenteel bijgevuld. Mobiele ontvochtigers blijven in werking. Er wordt momenteel gewerkt aan het herstel in samenwerking met de leveranciers van de koelinstallatie en het brandbeveiligingssysteem. Zodra beide buffertanks zijn bijgevuld, zullen technici de koelinstallaties opnieuw opstarten met geplande testruns. We hebben nog geen definitieve planning voor de oplossing en zullen updates blijven geven zodra deze beschikbaar zijn.

  • Update
    UTC
    Update

    Een nieuwe update vanuit het datacenter: het eerste lek is verholpen en een tweede lek is geïsoleerd. Het onderzoek naar de bron hiervan loopt nog. Het bijvullen van de koelinstallaties met water is nog gaande, mobiele ontvochtigers zijn in gebruik en er wordt nog steeds water verwijderd uit de getroffen gebieden. De herstelwerkzaamheden met de leveranciers van de koelinstallaties en brandbeveiligingssystemen zijn in volle gang en er zijn testruns van de koelinstallaties gepland zodra het bijvullen is voltooid. We hebben nog geen definitieve planning voor de oplossing en zullen updates blijven geven zodra deze beschikbaar zijn.

  • Update
    UTC
    Update

    Een nieuwe update vanuit het datacenter: het lek is inmiddels gelokaliseerd, het koelsysteem wordt bijgevuld met water, er is een extra slang geïnstalleerd om het bijvullen te versnellen, mobiele ontvochtigers zijn ingezet om de luchtvochtigheid te verlagen en het water wordt uit de getroffen gebieden verwijderd door middel van stofzuigen. Momenteel hebben we nog geen definitieve oplossingstermijn, maar we zullen updates blijven geven zodra we die ontvangen.

  • Identified
    UTC
    Identified

    Er is momenteel een storing bij de provider voor email en webhosting. Vanwege een lekkage in de koelsystemen zijn de servers tijdelijk offline gehaald. Er wordt momenteel gewerkt aan een oplossing.