{"id":322,"date":"2011-07-06T16:57:21","date_gmt":"2011-07-06T16:57:21","guid":{"rendered":"http:\/\/hagenborg.se\/?p=322"},"modified":"2011-07-06T17:24:40","modified_gmt":"2011-07-06T17:24:40","slug":"nytt-forsok-da-det-gamla-inlagget-forsvunnit-efter-restore","status":"publish","type":"post","link":"https:\/\/hagenborg.se\/?p=322","title":{"rendered":"Nytt f\u00f6rs\u00f6k (d\u00e5 det gamla inl\u00e4gget f\u00f6rsvunnit efter restore)"},"content":{"rendered":"<p>Bloggen har varit nere i n\u00e5gra dagar pga av att surftown webhotellet som vi anv\u00e4nder har haft stora problem efter \u00f6versv\u00e4mmningen som drabbade K\u00f6penhamn.<\/p>\n<p>N\u00e4r man ser detta s\u00e5 undrar man om det \u00e4r Danmark eller kanske Bangladesh<\/p>\n<p>Video <a href=\"http:\/\/www.bbc.co.uk\/news\/world-europe-14007888\">http:\/\/www.bbc.co.uk\/news\/world-europe-14007888<\/a><\/p>\n<p>Bildspel\u00a0 <a href=\"http:\/\/www.sydsvenskan.se\/danmark\/article1507071\/Skyfall-lamslog-Kopenhamn.html\">http:\/\/www.sydsvenskan.se\/danmark\/article1507071\/Skyfall-lamslog-Kopenhamn.html<\/a><\/p>\n<p>Jag publicerar \u00e4ven f\u00f6rsta inl\u00e4gget som Surftown skrev n\u00e4r deras server hall stod under vatten<\/p>\n<h1>P\u00e5 v\u00e4g ut ur\u00a0vattenmassorna<\/h1>\n<div>Postat <a title=\"00:00\" rel=\"bookmark\" href=\"http:\/\/surftownse.wordpress.com\/2011\/07\/04\/6\/\">4 juli, 2011  av <\/a><a title=\"Visa alla inl\u00e4gg av Surftown\" rel=\"author\" href=\"http:\/\/surftownse.wordpress.com\/author\/surftownse\/\">Surftown<\/a>&nbsp;<\/p>\n<div>\n<p>Inte riktigt den introduktion som jag hade \u00f6nskat:<\/p>\n<p>Hej!<\/p>\n<p>Jag har precis tilltr\u00e4tt som Kommunikations- och marknadschef p\u00e5  Surftown. Tanken \u00e4r att jag ska arbeta med produktutveckling och vi  planl\u00e4gger just nu en rad nya sp\u00e4nnande produkter i Surftown\u2026 och s\u00e5 kom  regnet till K\u00f6penhamn.<\/p>\n<p>L\u00f6rdag kl 22:00 ringde larmet p\u00e5 v\u00e5rt prim\u00e4ra datacenter som ligger  placerat vid hamnen i K\u00f6penhamn. K\u00f6penhamn fick p\u00e5 en timme regnm\u00e4ngder  som svarade f\u00f6r tv\u00e5 m\u00e5nader \u2013 och det \u00e4r inget system byggt f\u00f6r att  klara av. St\u00e5ld\u00f6rrar tillverkade f\u00f6r att s\u00e5 emot vatten \u00e4r s\u00f6nderslagna,  all str\u00f6m i byggnaden har g\u00e5tt och f\u00f6rv\u00e4ntas vara tillbaka igen p\u00e5  tisdag. K\u00e4llaren blev rekordsnabbt fylld med vatten och i grannk\u00e4llaren  st\u00e5r en Maserati under 2 meter med vatten (surt! Men inte i f\u00f6rh\u00e5llande  till den rensning som m\u00e5nga av oss nu st\u00e5r inf\u00f6r).<\/p>\n<p>Oavsett allt detta fungerade v\u00e5rt s\u00e4kerhetssystem \u2013 s\u00e5 kl 02:00 i  natt b\u00f6rjade n\u00f6dstr\u00f6msgeneratorn och producerade str\u00f6m till\u2026 ingenting.  Kortslutning i ledningar och elsk\u00e5p st\u00e4ngde effektivt ner v\u00e5rt  datacenter. Sedan kl 06:00 s\u00f6ndag morgon har hemv\u00e4rnet pumpat upp, upp  till 30.000 liter vatten fr\u00e5n k\u00e4llaren (per minut!) innan vi kl 14:00  kundef\u00e5 tillg\u00e5ng till server-rummet och b\u00f6rja att flytta v\u00e5ra servrar,  till s\u00e4kerhet. Den sista delen av t\u00f6mningen var firmabilarna, som t\u00f6mdes  p\u00e5 vatten vid kl 22 :-\/<\/p>\n<p>\u201dLyckligtvis\u201d \u00e4r vi ig\u00e5ng med att bygga ut v\u00e5rt senaste datacenter i  Amager, s\u00e5 vi har mycket stor kapacitet av serverrack, str\u00f6m osv. s\u00e5 att  vi p\u00e5 ett effektivt s\u00e4tt kunde flytta utrustning fr\u00e5n ett datacenter  till ett annat. Fr\u00e5n kl 14 till 22 har vi flyttat 300+ servrar och  \u00e5teretableringen k\u00f6rs p\u00e5 fullt tryck i skrivandets stund. H\u00e4r med f\u00f6ljer  en status p\u00e5 hur l\u00e5ng vi har kommit de f\u00f6rsta 24 timmarna och hur l\u00e5ngt  vi f\u00f6rv\u00e4ntar oss att komma inom n\u00e4sta 24 timmar:<\/p>\n<ul>\n<li>DNS-servrar: 100% Online<\/li>\n<li>Webbservrar: 100% Online<\/li>\n<\/ul>\n<p>Dessa servrar har inte drabbats av avbrott. En 10 Gbit f\u00f6rbindelse  har under natten till s\u00f6ndagen varit nere p\u00e5 1 Gbit, s\u00e5 svarstider kan  ha varit p\u00e5verkade. Dessv\u00e4rre \u00e4r en webbserver inte mycket v\u00e4rd om inte  de underliggande fil- och databasservrarna \u00e4r p\u00e5 plats. Och p\u00e5 dessa har  vi upplevt st\u00f6rningar. Status pr s\u00f6ndag kv\u00e4ll kl 23:30:<\/p>\n<ul>\n<li>Storageservrar: 77% online. Resterande \u00e5terst\u00e4lls fr\u00e5n back-up till  ny h\u00e5rdvara. \u00c5terst\u00e4llningen \u00e4r tidskr\u00e4vande d\u00e5 det \u00e4r miljoner av  sm\u00e5filer och f\u00f6rv\u00e4ntas vara avslutad m\u00e5ndag morgon.<br \/>\n<strong>Antalet p\u00e5verkade: upp till 23.000 av v\u00e5ra kunder<br \/>\n<\/strong><strong>Normal drift: f\u00f6rv\u00e4ntat m\u00e5ndag kl 09:00<\/strong><\/li>\n<li>E-postservrar: 3 servrar \u00e4r ska \u00e5terst\u00e4llas fr\u00e5n back-up till ny  h\u00e5rdvara. Ny h\u00e5rdvara levereras p\u00e5 m\u00e5ndag morgon och alla e-postkonton  kommer att fungera igen fr\u00e5n omkring lunchtid under m\u00e5ndag, direkt efter  installationen. E-postarkiv \u00e5terst\u00e4lls efterf\u00f6ljande och kommer p\u00e5 s\u00e5  vis att l\u00f6pande bli tillg\u00e4ngliga under efterf\u00f6ljande timmar.<br \/>\n<strong>Antalet p\u00e5verkade: Dessv\u00e4rre ok\u00e4nt, d\u00e5 mailservrarna \u00e4r Cloud  baserade. Kort sagt, n\u00e5gra fungerar och n\u00e5gra fungerar inte f\u00f6r \u00e4n p\u00e5  m\u00e5ndag.<br \/>\n<\/strong><strong>Normal drift: f\u00f6rv\u00e4ntas kl 12 m\u00e5ndag.<\/strong><\/li>\n<li>Databasservrar: 80% idag s\u00f6ndag. Resterande \u00e5terst\u00e4lls fr\u00e5n back-up under l\u00f6pet av m\u00e5ndagen.<br \/>\n<strong>Antal ber\u00f6rda: upp till 20.000 av v\u00e5ra kunder<br \/>\nNormal drift: f\u00f6rv\u00e4ntas sent under m\u00e5ndagen<\/strong><\/li>\n<li>Supportsystem (ticketsystem): Surftown supportsystemet har g\u00e5tt ner.  Det g\u00f6r det sv\u00e5rt att ta emot eller skicka supportmails \u2013 men systemet  ska vara klart igen m\u00e5ndag morgon kl 08:00. Systemet \u00e5terst\u00e4lls fr\u00e5n  back-up under skrivandets stund.<br \/>\n<strong>Antal ber\u00f6rda: Alla \u2013 beklagar.<br \/>\nNormal drift: f\u00f6rv\u00e4ntas m\u00e5ndag kl 8.00<\/strong><\/li>\n<\/ul>\n<p>Vi kommer att forts\u00e4tta h\u00e5lla alla informerade via v\u00e5r blogg och  twitter de kommande timmarna och dagarna. Jag hoppas att vi senast  tisdag \u00e4r helt tillbaka i normal drift, n\u00e4r n\u00f6dv\u00e4ndiga inf\u00f6rskaffningar  och n\u00f6d\u00e5tg\u00e4rder blir genomf\u00f6rda under m\u00e5ndag.<\/p>\n<p>Vi hoppas p\u00e5 er f\u00f6rst\u00e5else och ber verkligen om urs\u00e4kt f\u00f6r de problem  som detta har medf\u00f6rt m\u00e5nga av v\u00e5ra kunder. Vi \u00e4r verkligen ledsna.<\/p>\n<p>Som sagt heter jag Kresten \u2013 och det h\u00e4r \u00e4r (n\u00e4stan) min f\u00f6rsta dag  p\u00e5 jobbet. Jag ser fram emot att\u00a0 \u00e5terkomma med en annan typ av  information fram\u00f6ver\u2026 och \u00f6verv\u00e4ger om vi borde byta namn och flytta  till en mycket torr plats!<\/p>\n<p>B\u00e4sta h\u00e4lsningar<\/p>\n<div>Kresten Bach S\u00f8ndergaard<\/div>\n<div>Kommunikationschef<\/div>\n<div>Surftown<\/div>\n<\/div>\n<\/div>\n","protected":false},"excerpt":{"rendered":"<p>Bloggen har varit nere i n\u00e5gra dagar pga av att surftown webhotellet som vi anv\u00e4nder har haft stora problem efter \u00f6versv\u00e4mmningen som drabbade K\u00f6penhamn. N\u00e4r man ser detta s\u00e5 undrar man om det \u00e4r Danmark eller kanske Bangladesh Video http:\/\/www.bbc.co.uk\/news\/world-europe-14007888 Bildspel\u00a0 http:\/\/www.sydsvenskan.se\/danmark\/article1507071\/Skyfall-lamslog-Kopenhamn.html Jag publicerar \u00e4ven f\u00f6rsta inl\u00e4gget som Surftown skrev n\u00e4r deras server hall stod &hellip; <a href=\"https:\/\/hagenborg.se\/?p=322\" class=\"more-link\">Forts\u00e4tt l\u00e4sa <span class=\"screen-reader-text\">Nytt f\u00f6rs\u00f6k (d\u00e5 det gamla inl\u00e4gget f\u00f6rsvunnit efter restore)<\/span> <span class=\"meta-nav\">&rarr;<\/span><\/a><\/p>\n","protected":false},"author":1,"featured_media":0,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[1],"tags":[],"class_list":["post-322","post","type-post","status-publish","format-standard","hentry","category-uncategorized"],"_links":{"self":[{"href":"https:\/\/hagenborg.se\/index.php?rest_route=\/wp\/v2\/posts\/322","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/hagenborg.se\/index.php?rest_route=\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/hagenborg.se\/index.php?rest_route=\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/hagenborg.se\/index.php?rest_route=\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/hagenborg.se\/index.php?rest_route=%2Fwp%2Fv2%2Fcomments&post=322"}],"version-history":[{"count":2,"href":"https:\/\/hagenborg.se\/index.php?rest_route=\/wp\/v2\/posts\/322\/revisions"}],"predecessor-version":[{"id":324,"href":"https:\/\/hagenborg.se\/index.php?rest_route=\/wp\/v2\/posts\/322\/revisions\/324"}],"wp:attachment":[{"href":"https:\/\/hagenborg.se\/index.php?rest_route=%2Fwp%2Fv2%2Fmedia&parent=322"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/hagenborg.se\/index.php?rest_route=%2Fwp%2Fv2%2Fcategories&post=322"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/hagenborg.se\/index.php?rest_route=%2Fwp%2Fv2%2Ftags&post=322"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}