Vrijdag 2 augustus ging er aan het begin van de middag van alles mis op de server van PokerCity. De server, die twee maanden ervoor nog was verhuisd, vertoonde af en toe problemen met het forum. Laadtijden gaven problemen en soms liep het forum compleet vast. Zo ook die vrijdag. Na een restart van het forum liep kort erop ook de PokerCity site zelf vast, iets wat tot dan toe nog niet had plaatsgevonden. Helaas bleek deze niet 1,2,3 opnieuw op te starten; de server manager zelf reageerde ook niet meer.
PokerCity wordt (ivm de ontwikkeltaal) gehost op een Windows systeem. Een van de meest banale maar vaak probleemoplossende methodes is om de server opnieuw op te starten. Zo ook die vrijdag. Helaas was dit niet de oplossing; de server startte niet door maar bleef achter elkaar rebooten. Tijd voor snel contact met de webhost. De webhost voorzag niet direct grote problemen en gaf aan dat één en ander spoedig weer tevoorschijn zou komen. Dat bleek helaas een voorbarige conclusie.
De webhosting van PokerCity en de daaromheen liggende sites wordt al meer dan 7 jaar verzorgd door een bedrijf dat zich hierin heeft gespecialiseerd. Sinds 2010 vindt dat plaats op een eigen managed server die naast snelle hardware ook is voorzien van een aantal veiligheidsmaatregelen om te zorgen dat bij problemen snel kan worden geschakeld.
Opeenstapeling van problemen
Al snel bleek dat hardware problemen in de server een snelle oplossing in de weg zaten en daarom is er dat weekend voor gekozen om een compleet nieuwe server in te richten en daar de data naartoe te migreren. De websites kwamen – los van het forum – dat weekend ook weer allemaal tevoorschijn. Helaas niet zoals beoogd; de portals missen drie weken gegevens en het forum functioneerde niet.
Uit de werkzaamheden dat weekend bleek dat 1 van de 2 harde schijven compleet defect was. Een reddingspoging op die schijf die gedurende de afgelopen week heeft gelopen heeft dit niet op kunnen lossen; de gegevens op die schijf kunnen als verloren worden beschouwd.
Informatie van de andere harde schijf bleek ook niet volledig zonder problemen over te zetten. De database van de portals bleek niet compleet en de in de database van het forum zitten een aantal tabellen die corrupt zijn. Op die database heeft de afgelopen week ook een uitgebreide reddingsoperatie plaatsgevonden, die helaas afgelopen donderdag zonder succes is stilgezet.
De reden dat er meerdere harde schijven in onze server zitten is om problemen zoals deze te voorkomen. Zodra een harde schijf defect raakt hoort deze te worden vervangen zodat er altijd een goede kopie aanwezig is met alle gegevens. Mocht er dan alsnog een probleem ontstaan dan is er als fallback altijd nog het backup systeem, dat dagelijks van alle gegevens op een andere locatie een kopie bewaard.
De back-up dan?
De wet van Murphy sloeg helaas toe en de back-up, die inderdaad aanwezig is van onze site, blijkt in z’n geheel niet te gebruiken. Je zou denken dat er dan wellicht een oudere backup aanwezig was, maar dat bleek (ook) niet het geval.
De wet van Murphy sloeg helaas toe en de back-up, die inderdaad aanwezig is van onze site, blijkt in z’n geheel niet te gebruiken. Je zou denken dat er dan wellicht een oudere backup aanwezig was, maar dat bleek (ook) niet het geval.
Op dat moment word je even stil.
De webhost van PokerCity is een paar jaar terug overgegaan in een grote groep webhostingbedrijven waardoor er een enorme hoeveelheid kennis aanwezig is. Daarnaast is deze groep sinds 2012 ISO gecertificeerd, waardoor je verwacht dat processen tot in de puntjes verzorgd zijn. Die verwachting staaf je met de afspraken die je hebt gemaakt, service level agreements die zijn afgesproken en de informatie zoals deze door de host beschikbaar is gesteld. Dat alles lijkt, in ieder geval in onze situatie, niet compleet overeen te komen met de werkelijkheid.
Maar wat nu?
De ontbrekende informatie op de casino-, poker- en sportportals zal gedurende deze en aankomende week zoveel mogelijk worden aangevuld. Niet al het nieuws zal terug geplaatst worden maar onze Player Of the Year ranking en een aantal andere zaken zullen spoedig weer volledig aanwezig zijn. De livereportingsectie van de website is buiten schot gebleven en heeft geen schade ondervonden.
Op het forum vindt op dit moment alweer/opnieuw/nog steeds een reddingsoperatie plaats. De uitkomst daarvan is vooralsnog onduidelijk. Duidelijk is in ieder geval dat we naast afwachten of dit slaagt, intern aan het kijken zijn welke mogelijkheden we hebben om snel een nieuw forum online te zetten. Mocht inderdaad blijken dat het huidige forum niet in de oude glorie te herstellen is, dan zullen we direct de stap zetten om de softwarekeuze aan te passen en een nieuw forum lanceren.
PokerCity is de afgelopen jaren uitgegroeid tot een van de belangrijkste spelers in de Nederlandse pokermarkt. Ons drukbezochte forum wordt door sommigen als een van de gezelligste beschouwd. Dat is grotendeels te danken aan de grote groep bezoekers die er dagelijks uren doorbrengen. We hebben nu een enorme tegenslag en gaan er alles aan doen om dit te boven te komen. We hopen dat we daarbij hulp en support krijgen van onze bezoekers en hopen jullie spoedig weer op het forum te mogen begroeten.
*Update 16:30*
De trucendoos van onze host is nog niet geheel leeg. De harde schijf waar reeds een deel van de gegevens van kon worden gered is inmiddels gevirtualiseerd. Dit zorgt ervoor dat ze snel een aantal kopieën kunnen maken en per kopie een andere reddingsmethode kunnen toepassen. Vooralsnog is de situatie onveranderd maar er wordt iig op de achtergrond nog hard gewerkt om te kijken of de verloren gegevens toch kunnen worden teruggehaald. Ik verwacht hier morgen meer informatie over te hebben. – Alex
Die harde schijf dat kapot is, kan je laten uit lezen door een firma die alle data daar vanaf kan halen. Uiteraard is dat een groot kosten plaatje.
Dat er geen deftige backups zijn of dat backups niet gerestored kunnen worden slaat op niet veel volgens mij.
heb 4 grote projecten lopen en moest ik aan die klanten zeggen dat ik hun backups niet kan restoren, zou me dat heel veel geld gaan kosten.
Hopelijk snel weer terug!
Wat zouden de gevolgen zijn geweest als er bv livereport gedaan moest worden?
@BadBeatBadr : de website zelf was zondag weer online, duurde even aangezien er een verwijzing naar het (niet werkende) forum opstond. Als er toen een LR aan de gang was geweest had eea niet sneller dan nu online gekomen; er is het hele weekend (en ook er
Best wel sneu dat er zoveel schade is ontstaan. Ik hoop dat er toch nog zoveel als mogelijk gerecovered wordt. Misschien verstandig om in de toekomst op periodieke basis stresstesten in te plannen waarin de diverse rampscenario’s nagebootst kunnen worden. Het regelmatig checken van de validiteit van de back-up lijkt essentieel omdat zo’n beetje elke (server)update roet in het eten kan gooien.
Klein detail nog, misschien is het handig om de link naar het forum (die je nu naar de foutmelding brengt) naar een gebruikersvriendelijkere pagina te dirigeren zolang het forum offline is.
succes met de situatie.
@pocketjokers: helemaal mee eens. Dank voor de tip voor de forum link, zojuist pageholder tussengezet.
Eindelijk een update! Nu maar hopen dat het leukste en meest overzichtelijke pokerforum van NL weer snel online is! Succes ermee!!
Suk6 heren , als je iets kwijt bent besef je pas dat je iets mist. 😀
Hoop het forum weer gauw online te zien.
SHIT! Dus reset van al me berichten strakjs weer op 0 en rookie terwijl ik net Hero was :’-(
Weg 15k berichten 🙁 nooit die CSB meer tegen paps en mams….
er was net zo’n mooie opbouw in dat Rutte en Samsam topic, voor mezelf ook handig om weer eens terug te kijken, helaas pindakaas, ik ga hier een complottheorie over schrijven ;), zal gaan heten “de gemanipuleerde wet van murphy”, niet erg aannemelijk dat alle wekelijkse backups ook niet meer gangbaar zijn, maar goed, zal wel een zwartkijker zijn, suc6 verder hier!
Niemand mag voorlopig actie verkopen dus… 😉
Eerst ff 400 posts bij elkaar spammen! Lol
Niemand mag voorlopig actie verkopen dus… 😉
Eerst ff 400 posts bij elkaar spammen! Lol
Gelukkig was ik al sold voor de rsop:D oh wait, wie waren mn kopers ook alweer :o…en hoe ga ik ze bereiken….lol, forum is een behoorlijk gemis! Gl met de reparatie werkzaamheden!
En wat is nu precies het probleem met het forum? Waarom duurt het zo lang?
@BigBoBear: De database van de portals bleek niet compleet en de in de database van het forum zitten een aantal tabellen die corrupt zijn.
In het Nederlands staat hier : de gegevens van het forum zijn (nog) niet gered. Daar wordt (nog
Zou DB ook gewoon weer 1e staan in de TLB na de reset?
raar dat het allemaal zo lang moet duren..
ook tijd om over te stappen op een fatsoenlijke oplossing, dus geen windows en asp :p
@alex
Thanks voor de uitleg!
Jullie zullen ongetwijfeld je best doen maar het duurt echt belachelijk lang.
@pokermovies & @jasper: wij hebben geen enkele incentive om de uitrol van een nieuw forum te vertragen.
@pokermovies; Je mag het Microsoft .NET Framework hier niet de schuld van geven. Die doet gewoon z’n werk als de hardware naar behoren functioneert en de back-ups valide zijn.
Ik hoop eigenlijk dat het nog een week of 2 duurt. Dan hebben alle bap_tards alweer een verkoop profiel opgebouwd op een ander forum en zijn we in ieder geval weer een tijdje verlost van 30 micro stakes procentenlijstjes met mark up, per dag. Doe maar lekker rustig aan jongens!
^——- ^^
Het duurt nu wel echt belachelijk lang! @mmwhops, leuk hoor een ander forum, maar er gaat niets boven pokercity 🙂
M’n post was ook obvious een beetje een stab. Geen idee wie er zit te prutsen, maar om in deze spot te beweren dat er met man en macht aan gewerkt wordt is natuurlijk lachwekkend. Er zijn ruimtevaart programma’s voorbereid en succesvol afgerond in minder tijd dan dit.
@mmwhops: ik begrijp het ongeduld en kan wel toelichten waarom een forum relaunch niet hetzelfde tijdsbestek kan plaatsvinden als het opzetten van een ruimteprogramma:
Wanneer er een nieuw forum online komt zal dit niet hetzelfde forum (software) z
Dan gooi je het oude forum online, en zet je de zoektocht/voorbereidingen voort zonder dat je een community 2 weken op nul zet. Ik wil je niet te kakken zetten ofzo, maar je argumenten gaan nergens over. Iets waar met man en macht aan gewerkt wordt kan geen 2 weken duren, zeker niet het opzetten van een forumpje. Dat je iets niet wil afraffelen is bewonderenswaardig, maar nog geen geldig excuus om niet alvast een beta/test/tijdelijke versie online te gooien. Op het gebied van poker nieuws liep pokercity altijd een beetje achter op de rest, maar maakte dit goed door de enorm grote community die is opgebouwd vanuit de live reporting. De enige manier van sociale interactie binnen die community 2+ weken down te laten zonder enig alternatief te bieden, en tevens geen indicatie te geven wanneer het forum weer up and running is, is gewoon bar en bar slecht. Ik geloof niet dat er een zoogdier met meer dan 2 werkende hersencellen bestaat die het niet met me eens is in deze.
Beter iets dan niets:)
Succes iig met de werkzaamheden!
De serververhuizing, was dat nou daadwerkelijk een fysieke verhuizing of was het een verhuizing in de zin van, van fysiek naar webserver oid? heb er niet superveel verstand van, maar het kan idd niet zo zijn dat dit weken moet duren allemaal, wat is er nou aan de hand, is er geld nodig? zitten jullie om donatie’s verlegen? geen of amper reclameinkomsten meer? wat is er nou echt aan de hand?? want als er een paar experts op gezet worden is het volgens mij zo gefixed..
Ben het lang niet altijd eens met mmwhops maar een forum 2 weken down laten is wel lang…… te lang
Ik waardeer de ‘positieve’ aanmoedigingen en ben blij te signaleren dat jullie iig niet kunnen wachten totdat we elkaar weer op het forum mogen begroeten.
Antwoorden op een aantal vragen:
De server verhuizing was een fysieke verhuizing tussen 2 verschillende data centra. De problemen van nu hebben daar niets mee te maken; die verhuizing was meer dan 2 maanden geleden. Die hadden niets met kosten/geld te maken, de server verhuisde binnen de mogelijkheden van de webhost gewoon van plek/locatie, that’s all.
Vrijdag 2 augustus (nu 2 weken) ging de server down. Met de kennis van nu hadden we toen direct al een ander forum (zoals we nu aan het doen zijn) op kunnen gaan zetten en had deze idd eerder tevoorschijn gekomen. Maar met de kennis van toen hebben we eerst afgewacht of het ‘oude’ forum niet (op wat voor manier dan ook) weer online gebracht kon worden. In de afgelopen 2 weken zijn er een groot aantal mensen vanuit verschillende disciplines bezig geweest om (helaas zonder succes) te pogen die data terug te krijgen. Die processen vereisen tijd, en op de snelheid daarvan heb je niet of nauwelijks invloed.
Daarnaast zijn wij al vrij snel een proces aan onze kant gestart voor een plan B (ander forum) dat we nu zsm online brengen. Er is vanuit onze kant nergens vertraging aangebracht in dat proces. Het oude forum online zetten was/bleek onmogelijk, en een beta/test heeft weinig zin als je die vervolgens weer weggooit, al is het maar omdat de tijd die je daarin steekt je niet kan gebruiken om het nieuwe forum online te zetten. In tegenstelling tot de aannames hierboven is dat meer werk dan je verwachten.
Zodra het forum ‘klaar’ is komt deze online, en zullen een aantal andere functionaliteiten pas na livegang beschikbaar worden. In andere woorden: zodra het kán zal het forum beschikbaar zijn.
Als laatste wil ik opmerken dat ‘een community 2 weken op 0 zetten’ in een bericht van mmwhops als een keuze klinkt, maar dat geenzins is. Los van hoe vervelend het is dat het forum nu tijdelijk onbereikbaar is is dit iets wat ons plotseling is overkomen en ondanks allerhande afspraken is de recovery lang zo goed niet uitgepakt als we willen en verwacht hadden.
Een update over het forum volgt zo! 😉