2020-02-27

server10.serverdrift.com Databasproblem på server10

Fredag 28 Feb 11:45

Uppdatering kring orsaken av gårdagens MySQL-problem:

Under senaste veckan har server10 till och från haft prestandaproblem. För att lösa det har vi tillsammans med leverantören av operativsystemet (kerneln på servern) arbetat med att felsöka.

På grund av den mänskliga faktorn hos vår leverantör orsakades igår problemet med MySQL på server10 i samband med felsökningen. Problemet innebar att InnoDB-tabellerna på servern inte längre gick att skriva till.

Det här ska självklart aldrig inträffa. Vi ser nu över rutinerna kring hur kontakt och tillgång för våra närmsta leverantörer bör se ut framöver. Undertiden har ingen leverantör tillgång för felsökning.

Ledningen hos vår leverantör har startat en utredning över problemet internt hos dem. Vi förväntar oss svar av dem under dagen.


Vissa konton har problem med kontakt till MySQL på server10.serverdrift.com. Felsökning pågår.

19:34 MySQL slutade fungera och vi försöker nu starta om den.

19:45 MySQL hade inte stängts ner sig korrekt. Databaserna genomgår recovery.

20:15 Recovery pågår fortfarande.

20:22 Återställning beräknas vara klar om ca 2 timmar. Vi uppdaterar driftstatus löpande.

21:09 De flesta databaser verkar gå att läsa från men skrivning är avstängt under recovery-processen.

22:15 Det ser ut som databaserna behöver läsas om. Skrivning till databaserna kommer vara avstängt en tid till.

23:16 Importen har kört i 30 min och det ser ut som det kan ta ungefär en timma till.

23:45 Det ser ut att ta längre tid att göra klart importen än beräknat. Vi närmar oss att ha läst in 50% av databaserna.

00:50 Nu har vi snart läst in alla databaser. Vi har några saker att gå igenom nu.

01:05 Båda MySQL-instanser är nere medan vi gör bytet.

01:14 Den nya databasinstansen är igång och vi startar om alla cPanel-konton.

01:18 Allting verkar fungera igen men vi undersöker fortfarande.

01:24 Det skrivs mycket till databasen för närvarande men vi har inte hittat några fel i loggarna sen den nya MySQL-instansen startades. Vi stänger därmed driftsärendet.