De situatie

Dell Equallogic ™, Storage Area Network, VMware ESX-basis en RAID 10-back-upserver. Een plotselinge overstroming in Baden-Wurttemberg, Duitsland in het voorjaar van 2016 drong door tot de muren van een serverruimte in een hobby- en kunstbenodigdhedenwinkel en had ernstige gevolgen voor het IT-systeem. Grote hoeveelheden water stroomden de serverruimte binnen en beïnvloedden twee Dell-apparaten: een EqualLogic SAN met 96 harde schijven en een RAID 10-backupserver met 12 harde schijven De opslagcapaciteit van de SAN-harde schijven was tussen 300 en 700 gigabyte en de backupserver bevatte 24 terabyte aan gegevens. Ongeveer 30 terabyte aan gegevens ging verloren toen het SAN-volume en de iSCSI-verbindingen voor de SAN in een VMware ESX-server werden beschadigd. Vanwege het belang van de gegevens en het feit dat de meeste kritieke klantinformatie bevatten, werd een spoedherstel met Ontrack in gang gezet. Verschillende SAN-gevirtualiseerde LUN's die in een VMware-omgeving werden uitgevoerd, kregen prioriteit als kritieke informatie, waarbij één van hen een bijzonder belangrijke Oracle-database bevatte die zo snel mogelijk moest worden hersteld. De klant moest ook twee extra LUN's met belangrijke gegevens herstellen, evenals alle gegevens op de back-upserver.

De oplossing

Nadat we met de klant hadden samengewerkt om het gegevensverlies te beoordelen en prioriteit te geven aan de gegevens die moesten worden hersteld, werd vastgesteld dat de harde schijven in beide systemen gelijktijdig moesten worden verwerkt. Alle harde schijven zijn door Ontrack opgehaald en afgeleverd bij het data recovery lab in Boblingen, Duitsland. Bij aankomst zijn de harde schijven in eerste instantie verwerkt in een cleanroom omgeving om vuil veilig te verwijderen en de volledige omvang van de schade te inspecteren. De gegevens op elke harde schijf en de serverlocatie waren op dit moment ook gedocumenteerd. Gelukkig hadden de schijven in de SAN geen mechanische problemen en konden ze goed worden gelezen. Sommige schijven van de back-upserver waren echter defect en deze moesten verder worden verwerkt in de cleanroom om kopieën van de gegevens te extraheren.

Het SAN-gegevensherstel was erg complex, omdat de waterschade de verbinding met de VMware ESX Server en de voeding onderbrak terwijl deze in werking was. Dit betekende dat de koppelingen naar de EqualLogic SAN en de LUN's in de VMFS-datastores (evenals de Oracle-database en andere bestanden) zwaar beschadigd waren. Om het herstel uit te voeren, waren de eigen data recovery software tools van Ontrack nodig om het systeem en de bestandsstructuren te reconstrueren om bij de daadwerkelijke bestanden te komen. Het weer in elkaar zetten van de Dell-back-upserver was echter relatief eenvoudig, aangezien er nauwelijks gegevensbeschadiging was.