Nuevas herramientas permiten la recuperación de big data en soportes de almacenamientos altamente especializados de EMC® Isilon®

The Situation

En su mayor parte, los “archivos perdidos” consistían de datos en bruto recopilados a partir de análisis químicos realizados durante el continuo trabajo de investigación en laboratorio. La firma, en conjunto con el soporte de EMC, logró recuperar el 90% de los datos utilizando un proceso de reconstrucción estándar.  Con el fin de recuperar los archivos restantes que necesitaba imperiosamente, el cliente solicitó la ayuda de Ontrack. Ontrack trabajó con el soporte de EMC para para obtener la información detallada de la situación.

El Isilon IQ 6000x, diseñado para big data, contaba con 4 nodos de 15 TB de almacenamiento de datos en total, con discos rígidos de 500 GB instalados.

Estaba configurado como un único volumen, en donde todos los datos se encontraban segmentados en los diferentes discos. A diferencia de los sistemas RAID tradicionales, los sistemas Isilon fueron desarrollados en base al concepto de un enorme “lago de datos”, en donde todos los datos se almacenan y se gestionan dentro de un único conjunto de datos. Para gestionar el sistema y este lago de datos, Isilon creó un único sistema de archivos, llamado OneFS. En este caso, uno de los 4 nodos dentro del sistema experimentó un fallo en el núcleo, lo que provocó múltiples errores en distintos discos. EMC pudo recuperar la mayoría de los archivos mediante una reconstrucción, aunque la verificación de coherencia posterior reveló que varios de los discos tenían errores. Para recuperar los datos que faltaban, el equipo de Ontrack debió analizar el sistema de archivos para determinar de qué manera habían sido distribuidos los datos en todo el sistema de almacenamiento.

The Solution

Para determinar la distribución original de los datos en los discos y definir el mapeo de datos, el departamento de investigación y desarrollo de Ontrack diseño un nuevo conjunto de herramientas, únicas para OneFS.

A partir de estas herramientas, es posible analizar en profundidad un volumen existente de OneFS y detectar más rápidamente las estructuras de archivos de datos faltantes o defectuosas dentro del lago de datos de “big data”. Con la información relacionada a la estructura de datos de los sistemas de Isilon recopilada entonces, los ingenieros pudieron finalmente reconstruir y recuperar los datos faltantes.