Succesvolle Datacentrum data en disaster recovery

okt 1, 2020

The Situation

Top disaster recovery! 10 Racks 1491 harde schijven 1,2 petabytes data hersteld klant binnen 2,5 week volledig operationeel

Als een klant het grootste deel van zijn datacentrum verliest door waterschade is dat een niet te onderschatten probleem. Precies zo’n situatie deed zich voor toen een grote onderneming de hulp van Ontrack inriep: bij het bedrijf was een leiding gebarsten waardoor water het gebouw instroomde en een aantal onderdelen van het datacentrum fysiek was beschadigd. Samen gingen we hiermee onmiddellijk aan de slag.

The Solution

De klant stuurde 10 racks met daarin in totaal 1491 harde schijven (SAS-, SATA- en FC-schijven) met een grote diversiteit aan producten van verschillende storage- en softwareleveranciers (EMC, IBM en Oracle). Alleen al de logistiek hiervan was een grote uitdaging. Om tijd te besparen stuurde de klant de volledige racks naar Ontrack zodat er direct aan de slag kon worden gegaan.

Alle behuizingen in de kasten werden geïnspecteerd en geïnventariseerd. Er was waterschade aan de Processor Enclosures, Head Units, Disk Array Enclosures en de hard disks. Iedere harde schijf werd vervolgens uit de behuizing gehaald en geïnventariseerd (gelabeld). Daarna werd de schijven voor onderzoek overgedragen aan de engineers. Hier werden schijven stuk voor stuk geïnspecteerd waarna besloten werd om bit-for-bit image te maken (bij onbeschadigde of niet-vervuilde componenten) of de schijf over te brengen naar de cleanroom voor aanvullende werkzaamheden (bij vervuiling, zichtbare schade of niet-werkende schijven)

Alle beschadigde schijven (en/of vervuilde) werden overgebracht naar de cleanroom en gerepareerd met behulp van Ontrack tools en technieken om een zoveel mogelijk RAW data te redden. Van alle media werd een zo goed mogelijk image gemaakt (sector-by-sector-kopie), waarna de klant een rapport kreeg met de resultaten van het imaging-proces.

Bij Ontrack werden de images gemaakt naar imageservers. Tijdens het imaging-proces was voldoende capaciteit nodig om alle data, 1,2 petabytes , van de klant te kunnen hosten. Daarvoor werd een aantal snelle maar wel grote aanpassingen gedaan aan het Ontrack datacentrum waardoor ook aan die verwachtingen kon worden voldaan.

The Resolution

Nadat de gegevens waren gerecovered, gerepareerd en hersteld - een hele prestatie met 1491 schijven werden de systemen weer in elkaar gezet en werd zowel fysiek als elektronisch gecontroleerd of ze weer klaar voor gebruik waren. En klaar ……toch?

Jammer maar helaas! Zodra de apparatuur terug was bij de klant en weer in gebruik kon worden genomen, was het tijd om hun datacentrum opnieuw op te bouwen. Een aantal componenten moest worden vernieuwd. Wie werkzaam is op het gebied van enterprise storage weet dat het niet zomaar een kwestie is van de racks terugzetten, paar componenten veranderen, de stekker in het stopcontact en aanzetten. Als je oudere opslagsystemen hebt die moeten samenwerken met nieuwere apparatuur, met producten van meerdere fabrikanten en met verschillende softwareprogramma’s, is het niet gek als er zich een paar problemen voordoen voordat alles weer naadloos met elkaar samenwerkt.

Een team van de klant, specialisten van de OEM’s en Ontrack ingenieurs werkte nauw samen bij het oplossen van problemen en het aanschaffen van de juiste apparatuur, totdat alle systemen weer goed werkten. Uiteindelijk lukte het om alle schijven te herstellen vanaf het punt waarop de systemen niet meer werkten, waardoor alle data uiteindelijk weer beschikbaar was.

Deze opdracht kan als volgt worden samengevat:

  • Meer dan 15 ingenieurs, logistieke, verkoop- en technische supportmedewerkers van Ontrack stonden gedurende het hele proces constant in contact met de klant;
  • Van 1491 harde schijven werden images gemaakt;
  • 1,2 petabytes aan data werd verwerkt en opgeslagen tot het datacentrum van de klant weer volledig operationeel was;
  • Binnen 2,5 week was de klant weer volledig operationeel. Verbazingwekkend als je bedenkt hoeveel tijd het alleen al kost om een nieuw datacentrum te bouwen zonder dat er gegevens moeten worden hersteld.

Van datacentrum data recovery naar disaster recovery = succesvolle data recovery!