Vrijdag 2 augustus ging er aan het begin van de middag van alles mis op de server van PokerCity. De server, die twee maanden ervoor nog was verhuisd, vertoonde af en toe problemen met het forum. Laadtijden gaven problemen en soms liep het forum compleet vast. Zo ook die vrijdag. Na een restart van het forum liep kort erop ook de PokerCity site zelf vast, iets wat tot dan toe nog niet had plaatsgevonden. Helaas bleek deze niet 1,2,3 opnieuw op te starten; de server manager zelf reageerde ook niet meer.
PokerCity wordt (ivm de ontwikkeltaal) gehost op een Windows systeem. Een van de meest banale maar vaak probleemoplossende methodes is om de server opnieuw op te starten. Zo ook die vrijdag. Helaas was dit niet de oplossing; de server startte niet door maar bleef achter elkaar rebooten. Tijd voor snel contact met de webhost. De webhost voorzag niet direct grote problemen en gaf aan dat één en ander spoedig weer tevoorschijn zou komen. Dat bleek helaas een voorbarige conclusie.
De webhosting van PokerCity en de daaromheen liggende sites wordt al meer dan 7 jaar verzorgd door een bedrijf dat zich hierin heeft gespecialiseerd. Sinds 2010 vindt dat plaats op een eigen managed server die naast snelle hardware ook is voorzien van een aantal veiligheidsmaatregelen om te zorgen dat bij problemen snel kan worden geschakeld.
Opeenstapeling van problemen
Al snel bleek dat hardware problemen in de server een snelle oplossing in de weg zaten en daarom is er dat weekend voor gekozen om een compleet nieuwe server in te richten en daar de data naartoe te migreren. De websites kwamen – los van het forum – dat weekend ook weer allemaal tevoorschijn. Helaas niet zoals beoogd; de portals missen drie weken gegevens en het forum functioneerde niet.
Uit de werkzaamheden dat weekend bleek dat 1 van de 2 harde schijven compleet defect was. Een reddingspoging op die schijf die gedurende de afgelopen week heeft gelopen heeft dit niet op kunnen lossen; de gegevens op die schijf kunnen als verloren worden beschouwd.
Informatie van de andere harde schijf bleek ook niet volledig zonder problemen over te zetten. De database van de portals bleek niet compleet en de in de database van het forum zitten een aantal tabellen die corrupt zijn. Op die database heeft de afgelopen week ook een uitgebreide reddingsoperatie plaatsgevonden, die helaas afgelopen donderdag zonder succes is stilgezet.
De reden dat er meerdere harde schijven in onze server zitten is om problemen zoals deze te voorkomen. Zodra een harde schijf defect raakt hoort deze te worden vervangen zodat er altijd een goede kopie aanwezig is met alle gegevens. Mocht er dan alsnog een probleem ontstaan dan is er als fallback altijd nog het backup systeem, dat dagelijks van alle gegevens op een andere locatie een kopie bewaard.
De back-up dan?
De wet van Murphy sloeg helaas toe en de back-up, die inderdaad aanwezig is van onze site, blijkt in z’n geheel niet te gebruiken. Je zou denken dat er dan wellicht een oudere backup aanwezig was, maar dat bleek (ook) niet het geval.
De wet van Murphy sloeg helaas toe en de back-up, die inderdaad aanwezig is van onze site, blijkt in z’n geheel niet te gebruiken. Je zou denken dat er dan wellicht een oudere backup aanwezig was, maar dat bleek (ook) niet het geval.
Op dat moment word je even stil.
De webhost van PokerCity is een paar jaar terug overgegaan in een grote groep webhostingbedrijven waardoor er een enorme hoeveelheid kennis aanwezig is. Daarnaast is deze groep sinds 2012 ISO gecertificeerd, waardoor je verwacht dat processen tot in de puntjes verzorgd zijn. Die verwachting staaf je met de afspraken die je hebt gemaakt, service level agreements die zijn afgesproken en de informatie zoals deze door de host beschikbaar is gesteld. Dat alles lijkt, in ieder geval in onze situatie, niet compleet overeen te komen met de werkelijkheid.
Maar wat nu?
De ontbrekende informatie op de casino-, poker- en sportportals zal gedurende deze en aankomende week zoveel mogelijk worden aangevuld. Niet al het nieuws zal terug geplaatst worden maar onze Player Of the Year ranking en een aantal andere zaken zullen spoedig weer volledig aanwezig zijn. De livereportingsectie van de website is buiten schot gebleven en heeft geen schade ondervonden.
Op het forum vindt op dit moment alweer/opnieuw/nog steeds een reddingsoperatie plaats. De uitkomst daarvan is vooralsnog onduidelijk. Duidelijk is in ieder geval dat we naast afwachten of dit slaagt, intern aan het kijken zijn welke mogelijkheden we hebben om snel een nieuw forum online te zetten. Mocht inderdaad blijken dat het huidige forum niet in de oude glorie te herstellen is, dan zullen we direct de stap zetten om de softwarekeuze aan te passen en een nieuw forum lanceren.
PokerCity is de afgelopen jaren uitgegroeid tot een van de belangrijkste spelers in de Nederlandse pokermarkt. Ons drukbezochte forum wordt door sommigen als een van de gezelligste beschouwd. Dat is grotendeels te danken aan de grote groep bezoekers die er dagelijks uren doorbrengen. We hebben nu een enorme tegenslag en gaan er alles aan doen om dit te boven te komen. We hopen dat we daarbij hulp en support krijgen van onze bezoekers en hopen jullie spoedig weer op het forum te mogen begroeten.
*Update 16:30*
De trucendoos van onze host is nog niet geheel leeg. De harde schijf waar reeds een deel van de gegevens van kon worden gered is inmiddels gevirtualiseerd. Dit zorgt ervoor dat ze snel een aantal kopieën kunnen maken en per kopie een andere reddingsmethode kunnen toepassen. Vooralsnog is de situatie onveranderd maar er wordt iig op de achtergrond nog hard gewerkt om te kijken of de verloren gegevens toch kunnen worden teruggehaald. Ik verwacht hier morgen meer informatie over te hebben. – Alex
