Crash server Lionel
Competitieserver Lionel heeft gisteren, Maandag 28 Juli, de geest gegeven. Helaas waren we gedwongen de backup terug te zetten, waardoor de aanpassingen tussen de tijd van de backup en de crash verloren zijn gegaan.
Bewaarde oorspronkelijke brongegevens (gzip) ↗
Competitieserver Lionel heeft gisteren, Maandag 28 Juli, de geest gegeven. Helaas waren we gedwongen de backup terug te zetten, waardoor de aanpassingen tussen de tijd van de backup en de crash verloren zijn gegaan.
Het probleem dat zich voordeed was astronomisch onwaarschijnlijk, de technische details zullen we jullie besparen. Kort gezegd kwam het erop neer dat zowel onze primaire harddisk als de reserve tegelijk kapot zijn gegaan. Hierdoor was het niet meer mogelijk de gegevens te herstellen.
Elke nacht maken we een backup van alle servers, dus ook van Lionel. Toen we vastgesteld hadden dat de huidige database niet meer te repareren was, zijn we de backup terug gaan zetten. Dit is nu inmiddels gebeurd.
Gebruikers die op server Lionel zitten, kunnen nu weer inloggen. Gebruikers op De overige servers hebben van dit probleem overigens niets gemerkt.
Het probleem met het terugzetten van een backup, is dat alle wijzigingen die in de tussentijd zijn gedaan, verloren zijn gegaan. Dit betreft o.a.:
- gekochte seizoenskaarten
- verwisselen van server
- team gekozen
- competitie aangemaakt
- spelers(s) gekocht
Dit alles is verloren gegaan. We gaan hard aan het werk om de eerste twee punten (seizoenskaarten en verwisselen server) toch nog voor iedereen in orde te maken. We houden logs bij wie wanneer iets heeft besteld, dus we kunnen dat in ieder geval weer herstellen.
De overige zaken zijn helaas niet zo eenvoudig op te lossen. Een crash zoals deze hebben we in de 7 jaar dat OSM bestaan nog nooit meegemaakt. Als klap op de vuurpijl was ook de systeembeheerder nu net een weekje op vakantie waar hij geen bereik heeft met zijn mobiel, waardoor alles langer duurde dan normaal.
Lionel is nu op een andere machine gezet die weliswaar wat trager is, maar dat zal naar verwachting prima werken. We hopen volgende week Lionel weer op een nieuwe, snelle server te kunnen zetten en toe te werken naar een situatie waarin dit natuurlijk niet meer kan gebeuren.
Onze excuses voor hetgeen zich heeft voorgedaan en we werken er momenteel hard aan alles weer draaiende te krijgen en te herstellen.
Elke nacht maken we een backup van alle servers, dus ook van Lionel. Toen we vastgesteld hadden dat de huidige database niet meer te repareren was, zijn we de backup terug gaan zetten. Dit is nu inmiddels gebeurd.
Gebruikers die op server Lionel zitten, kunnen nu weer inloggen. Gebruikers op De overige servers hebben van dit probleem overigens niets gemerkt.
Het probleem met het terugzetten van een backup, is dat alle wijzigingen die in de tussentijd zijn gedaan, verloren zijn gegaan. Dit betreft o.a.:
- gekochte seizoenskaarten
- verwisselen van server
- team gekozen
- competitie aangemaakt
- spelers(s) gekocht
Dit alles is verloren gegaan. We gaan hard aan het werk om de eerste twee punten (seizoenskaarten en verwisselen server) toch nog voor iedereen in orde te maken. We houden logs bij wie wanneer iets heeft besteld, dus we kunnen dat in ieder geval weer herstellen.
De overige zaken zijn helaas niet zo eenvoudig op te lossen. Een crash zoals deze hebben we in de 7 jaar dat OSM bestaan nog nooit meegemaakt. Als klap op de vuurpijl was ook de systeembeheerder nu net een weekje op vakantie waar hij geen bereik heeft met zijn mobiel, waardoor alles langer duurde dan normaal.
Lionel is nu op een andere machine gezet die weliswaar wat trager is, maar dat zal naar verwachting prima werken. We hopen volgende week Lionel weer op een nieuwe, snelle server te kunnen zetten en toe te werken naar een situatie waarin dit natuurlijk niet meer kan gebeuren.
Onze excuses voor hetgeen zich heeft voorgedaan en we werken er momenteel hard aan alles weer draaiende te krijgen en te herstellen.
Open de volledige museumweergave met reacties en archiefversies ↗