Comment récupérer des photos d'un NAS corrompu – Un serveur de qualité

Juste avant Noël 2018, une catastrophe s'est produite: en raison d'un lissage de logiciel sur l'ordinateur Windows 10, j'ai perdu l'accès à toutes mes photos et à de nombreux autres fichiers lorsque le répertoire de mon stockage réseau (NAS) a été endommagé. Il a fallu beaucoup de temps pour que mes fichiers reviennent à la (presque) normalité et c'est un rappel opportun à tous les utilisateurs de NAS et / ou de RAID que des sauvegardes étendues sont tout aussi importantes que pour les disques durs connectés localement.

Pourquoi des sauvegardes RAID complètes sont toujours cruciales

Ce document décrit ce qui s'est passé et les nombreuses étapes fastidieuses nécessaires pour restaurer mes fichiers là où ils se trouvaient quelques secondes à l'avance. Une grande partie de ce que je décris s'appliquera également à un lecteur défectueux dans votre ordinateur!

Remarque à l'attention des techniciens & # 39; se lit ainsi: Dans quelques domaines, j’ai simplifié l’explication de la réduction de la longueur du document et de sa plus grande digestibilité pour la majorité des Nikoniens.

Qu'est-ce qu'un NAS et un RAID?

Tout d’abord, laissez-moi vous expliquer en quoi consistent ces deux choses:

• Un périphérique de stockage en réseau (NAS) est simplement une boîte contenant un certain nombre de lecteurs de disque connectés à un réseau, plutôt que d'être branchés directement à l'ordinateur. Cela vous donne non seulement accès à beaucoup plus d'espace de stockage que ne peut en contenir votre ordinateur de bureau ou votre ordinateur portable, mais également un accès où que vous soyez connecté à Internet. Dans la plupart des cas, le temps supplémentaire nécessaire pour accéder à vos fichiers sur le réseau est si minime que vous ne voulez pas voir la différence. Un NAS est en réalité un ordinateur personnel qui ne possède pas les composants "d'interface humaine" tels que les cartes vidéo et audio, les claviers, les souris, etc.

• Un RAID, ou réseau redondant de disques indépendants, est un moyen de fournir une protection en cas de défaillance d'un disque. Ainsi, en cas de défaillance d'un disque, vous pouvez continuer à accéder à vos données en toute transparence. Une fois le disque défectueux remplacé, le logiciel NAS se chargera de mettre à jour le nouveau disque. Il existe un certain nombre de configurations RAID possibles, mais la plus sûre et la plus chère est la réplication de chaque disque sur un autre. Par exemple, une paire de disques de 2 To est vue par l'ordinateur sous la forme d'un seul disque de 2 To: NAS contrôle le flux de données entre les deux disques sans mettre fin à l'intervention de l'utilisateur.

• Le fait de disposer de disques dans un NAS peut également faciliter la gestion des données, car celui-ci peut présenter une variété de disques à tous les utilisateurs qui y accèdent comme s'il s'agissait d'un seul grand disque.

Mon lecteur QNAP NAS est mon lecteur principal pour la quasi-totalité de mes données: documents, feuilles de calcul et environ 100 000 images. Il contient un ensemble de quatre disques durs «Red» Western Digital de 3 To configurés dans une matrice RAID 10: cela signifie que mon ordinateur voit un seul disque de 5,8 To mappé pour exécuter la lettre «G», mais se trouve dans les stations NAS. ceux en deux paires, chacune étant une copie de l’autre, de sorte que si un lecteur tombe en panne (ou deux, s’ils ne font pas partie de la même paire), l’ordinateur continue à afficher toutes les données sans se rendre compte de l’erreur. Connectez-vous simplement à un nouveau lecteur pour remplacer le périphérique hors service. Le système de fichiers QNAP mettra à jour le nouveau lecteur. Facile. Redondance à 100% = protection à 100%. N'est-ce pas?

Stratégie de sauvegarde utilisée

En raison de la tolérance aux pannes du système RAID, je ne recréais les données tous les 4 à 6 mois que sur deux disques durs externes, qui étaient ensuite stockés dans un bâtiment externe éloigné de chez moi. J'ai donc une protection contre le vol et les incendies. Mes disques locaux sont sauvegardés tous les mois (presque tous mes fichiers non-système, y compris les dossiers Windows par défaut sur le bureau, les documents, les téléchargements, etc., se trouvent sur un RAID à deux disques de l'unité centrale). Tout le monde semblait satisfait et avait parfaitement fonctionné pendant deux ans.

Le crash: que s'est-il passé?

Lorsque le moment était venu pour moi d'effectuer une autre sauvegarde NAS, j'ai branché mes deux disques durs externes comme d'habitude et j'ai immédiatement remarqué que Windows en avait affecté un (qui était amorçable et créé par le logiciel de sauvegarde Acronis True Image). lancez "G" – ce qui devrait être mon NAS. J'ai immédiatement jeté le disque et vérifié les tâches de ma station. Mon NAS était toujours assigné «G», mais quand j'ai regardé le contenu, j'ai découvert que le disque dur externe avait écrasé le répertoire du NAS, ne laissant que quelques centaines de fichiers. À ce stade, je me sentais un peu froid et en sueur, et un peu malade! Peut-être une des raisons pour lesquelles je ne l'avais jamais eu auparavant est qu'il y avait toujours au moins deux lettres de lecteur supplémentaires devant G, mais lorsqu'il y avait de nouveaux lecteurs supplémentaires dans l'unité centrale, "G" était la prochaine file d'attente du disque dur externe – ou Donc, soi-disant Windows, a réussi à ignorer le fait qu'il était déjà utilisé.

Je n'ai pas trouvé de situation similaire à partir de ma recherche en ligne, il ne fait aucun doute que la corruption a été causée par le lecteur externe amorçable, car les fichiers dans les dossiers supplémentaires sont principalement des fichiers "bootmgr.exe.mui". Ce n'était pas la première fois que cette station était attachée, alors la cause est un mystère. C'est sans doute une combinaison d'événements qui ne peut plus jamais se reproduire, mais je ne me sens pas enclin à essayer de recréer le problème!

Le scénario auquel je ne m'attendais jamais était que, si le répertoire de fichiers est corrompu, l'ensemble du RAID devient inutile et que la seule option est une sauvegarde complète des sauvegardes, malgré le fait que la redondance à 100% garantisse la tolérance aux pannes dans le RAID.

Mesures immédiates

Étape et: Comme le disent les affiches "GARDER CALME ET PAS DE PANIQUE". C'est plus facile à dire qu'à faire. Alors, d'abord, éteignez le NAS. Je ne risquerais aucune perte supplémentaire accidentelle, car même si le répertoire de fichiers était cassé, je savais que les fichiers eux-mêmes seraient présents, mais il me faudrait beaucoup de temps pour réfléchir à ce qu'il fallait faire.

Deuxième étape: Créez un nouveau répertoire Lightroom. Bien que le répertoire ne soit pas sur le NAS et que la création d'un nouveau ne soit pas strictement nécessaire, je souhaitais conserver le contenu au moment du blocage afin de pouvoir voir plus tard exactement ce qui devait être reconstruit sur le NAS, car le répertoire marquerait les fichiers manquants.

Troisième étape: Développer un plan d'action. À part le courrier électronique et Internet, je n'ai pas utilisé l'ordinateur du tout pendant quelques jours, tout en ayant une idée claire de ce qui s'était réellement passé et de la façon de tout restaurer. Pendant les premières 24 heures, ma tête n’était pas claire, mais 40 ans dans l’industrie informatique m’avaient appris qu’en cas de crise, il était préférable de ne pas faire d’essais fantaisistes, car ils pouvaient souvent entraîner encore plus de pertes de données.

Quatrième étape: Il s'agissait de documenter un aperçu complet de mes sauvegardes "formelles" et de toutes les autres sources de données, telles que Dropbox, cartes mémoire, etc. J'avais des sauvegardes de tout sur NAS en février 2018 et des images en juin 2018 – le tout, à l'exception de Mes photos de 2017. Pourquoi 2017 avait été exclu des sauvegardes reste un mystère. Une chose que je pourrais remercier, c’est que mes fichiers de données Outlook et le répertoire Lightroom se trouvent sur le lecteur RAID sur PC.

Cinquième étape: Recherche de récupération RAID. À mon grand étonnement, le fabricant de NAS, QNAP, n’a offert aucune assistance sur les stratégies de récupération potentielles, d’autres discutant des discussions sur son forum de support. Lorsque j'ai commencé à étudier la récupération de données à partir d'une configuration NAS / RAID, j'ai découvert deux problèmes clés:

1. La plupart des progiciels de récupération de données n'analysent pas les disques en même temps qu'ils sont connectés au réseau, car cela signifie uniquement un accès via le système de fichiers NAS. Le logiciel ne peut donc pas contourner le répertoire et consulter directement le contenu du disque.

2. La plupart des configurations RAID utilisent une technique appelée striping pour augmenter les performances en écrivant des blocs de données alternatifs sur chaque disque du groupe RAID, accélérant ainsi l'écriture et la lecture. Cela signifie que le logiciel de récupération que vous utilisez doit savoir qu'il est en train de manipuler un RAID, car les données de chaque fichier, quelle que soit leur taille, sont divisées par plus d'un disque, aucun disque ne contenant le fichier entier.

De mes recherches, les trois programmes de récupération étaient les plus susceptibles de donner un bon résultat:

1. Récupération RAID DiskInternals suivie de récupération NTFS

2. Récupération PhotoRec

3. Récupération de fichier ReclaiMe

DiskInternals et ReclaiMe s'appuient sur les disques RAID pour être directement connectés au PC pendant que PhotoRec fonctionne sur un NAS mais est contrôlé à partir du PC.

DiskInternals et ReclaiMe disposent tous deux d’un mode d’essai qui complète l’analyse du disque, indique les fichiers trouvés et réclame le succès de la récupération ultérieure lorsque les droits de licence sont payés. PhotoRec est gratuit et stocke les fichiers récupérés sur un autre disque.

Sixième étape: Définir une stratégie de récupération de clé qui était "Ne supprimez aucune donnée avant la reconstruction du NAS et la création de nouvelles sauvegardes" pour m'assurer que j'ai toujours au moins deux copies de toutes mes données. Il était clair que, pour ce faire, j'aurais besoin de beaucoup de capacité de disque supplémentaire. Deux disques durs externes WD 6 To ainsi que quatre nouveaux disques pour la reconstruction du NAS ont donc été commandés.

récupération expérience

1. Récupération RAID DiskInternals (v6.2) + Récupération NTFS DiskInternals

Le logiciel de récupération RAID est gratuit et vise à identifier la configuration technique du RAID et son mode de distribution sur les disques. Ces informations sont stockées dans un fichier XMP pour être enregistrées dans le logiciel de récupération NTFS. L'ensemble du processus, y compris une analyse complète du disque, a pris presque 24 heures et a signalé un nombre important de fichiers pouvant être récupérés, mais seulement environ 60% du nombre auquel je m'attendais. Je savais donc que ce logiciel ne donnerait pas un résultat satisfaisant. La licence du logiciel de récupération NTFS coûte 99,95 $.

2. Récupération PhotoRec

Le processus un peu plus complexe requis pour exécuter le logiciel gratuit PhotoRec sur NAS était bien documenté dans le forum QNAP par quelqu'un qui en avait déjà parlé, même s'il supposait que vous compreniez les formats de commande UNIX. Tout d'abord, il était nécessaire de télécharger le logiciel PhotoRec (qui fait partie du package TestDisk) sur un lecteur externe, puis de connecter ce lecteur directement au QNAP NAS. L'utilisation d'un logiciel appelé Putty exécuté sur votre PC fournit une interface de style "boîte DOS" permettant d'exécuter des commandes UNIX sur un NAS. Les fichiers récupérés sont créés sur le disque externe (ou spécifié) dans une série de dossiers contenant chacun entre 500 et 750 fichiers, mais il n'y a pas de catégorisation pour savoir quels fichiers sont dans quel dossier. Globalement, PhotoRec a fait le meilleur travail de récupération de fichiers et de recherche des dates et des codes de fichiers d'origine. L'exécution de cette opération prend environ 24 heures.

3. ReclaiMe

Le package ReclaiMe possède une interface très intuitive qui recherche tous les disques disponibles sur le système et demande confirmation de ceux à analyser. Une fois que cela est fait, tout est automatique. Une bonne fonctionnalité du package est qu’il répertorie et totalise les fichiers récupérés par type de fichier, qu’il affiche également un répertoire reconstruit (si possible) et qu’il est possible de récupérer les fichiers sélectionnés pendant l’analyse de récupération. Bien que vous deviez payer les droits de licence (199,95 $) pour récupérer des fichiers, ceux-ci offrent une garantie de remboursement de 100% si vous ne récupérez pas correctement.

ReclaiMe a fait un très bon travail, mais comme avec PhotoRec, la restauration de nombreux fichiers PSD ou TIF a échoué. J'ai pris une photo d'erreur avec eux et, quelques heures plus tard, j'ai reçu une réponse suggérant qu'ils se connectaient à mon ordinateur à l'aide de TeamViewer. Cela était prévu le lendemain et a commencé à l'heure convenue. Le problème des fichiers PSD et TIF a été identifié du fait d’une mise à jour importante depuis leur création. La raison est la suivante:

Lorsque les données sont écrites sur le disque, elles seront écrites à l’avance sur des blocs inutilisés s’il en reste suffisamment (ce qui sera généralement le cas). Si le fichier est mis à jour ultérieurement et augmenté, plusieurs blocs peuvent être nécessaires, mais si le bloc adjacent est déjà utilisé, l'emplacement du nouveau bloc sera stocké avec les détails du fichier dans le répertoire. Sans le répertoire, le logiciel de récupération peut identifier le début d'un fichier en reconnaissant le type de fichier "signature" et continuer à extraire des blocs de données contigus jusqu'à ce qu'il reconnaisse une autre signature indiquant que le début d'un nouveau fichier est atteint. Il ne peut pas récupérer le fichier entier car il ne connaît pas les blocs qui contiennent le reste des données du fichier. Pour cette raison, aucun des logiciels de récupération que j'ai essayés n'a réussi à récupérer un grand nombre de mes fichiers PSD ou TIF qu'ils ont mis à jour et ont souvent pris une taille nettement plus importante depuis leur création. Les fichiers sont restaurés, mais des erreurs se produisent lors de l'ouverture dans Photoshop, généralement "la fermeture inattendue du fichier". En revanche, tous les fichiers NEF semblent avoir été restaurés car ils ne sont jamais mis à jour par Lightroom ou Photoshop.

Comme il était clair qu'aucun logiciel de récupération ne réussirait sans l'annuaire, j'ai réclamé le remboursement des frais de licence et, à ma grande surprise, il était de retour dans mon compte en seulement quatre jours!

4. Récupération RAID DiskInternals (v6.4)

J'ai découvert qu'il y avait une nouvelle version de ce paquet dans laquelle les deux parties étaient combinées. Je l'ai donc téléchargée pour voir si la récupération serait meilleure. Malheureusement, cela a provoqué une erreur immédiatement après le démarrage et ne s'est pas poursuivi. Je l'ai soulevé comme un problème, mais il n'a pas encore été résolu. Cette version remodelée est nettement plus chère qu’avant, à partir de 249 USD.

Comprendre les données récupérées

Lorsque les données ont été restaurées, j'ai dû filtrer ce dont j'avais vraiment besoin, mais de nombreux obstacles compliquent le processus:

1. Parce que les noms de fichiers sont conservés dans le répertoire (ce qui est devenu une ordure), le logiciel de récupération attribue à chaque fichier un nom "créé" comme "f00034586220198.jpg». Heureusement, lorsque les fichiers ont été initialement écrits sur le disque en tant que groupe (à partir d'un téléchargement de carte mémoire, par exemple), ils apparaissent généralement dans une zone contiguë du disque et sont donc traités de manière séquentielle par le logiciel de récupération et reçoivent ainsi des numéros séquentiels, ce qui signifie qu'ils peuvent être triés. et ré-archivé en tant que groupe.

2. Comme pour les noms de fichier, les dates enregistrées et modifiées sont stockées dans le répertoire. Ainsi, à l'exception de certains formats contenant également le nom du fichier et les métadonnées dans le fichier lui-même, tels que les fichiers Excel et Word, toutes les dates de fichier sont définies avec la date de récupération.

3. Les fichiers précédemment supprimés peuvent également être trouvés par l'analyse s'ils sont toujours intacts. Par conséquent, certains fichiers apparaîtront plusieurs fois.

4. Des miniatures JPEG incorporées dans des fichiers image plus volumineux (tels que des fichiers NEF) sont également détectées et "récupérées", ce qui vous permet d'obtenir des milliers d'images JPEG extra petites (par exemple, 150 x 100 pixels).

Ce qui manque

1) Quelques fichiers PSD et TIF

Cela a été une perte énorme pour moi, non pas en nombre de fichiers, mais en forme de travail que j'avais effectué dans Photoshop au cours du deuxième semestre de 2018. J'ai de grandes copies JPG des images finales, mais je ne peux pas y aller maintenant. retour pour voir comment j’ai obtenu des résultats importants, en particulier pour des expositions très créatives.

Deux images avec des fichiers Photoshop perdus (PSD)

2) Fichiers secondaires XMP

Pas perdu … juste des orphelins, car le logiciel de récupération ne peut pas connecter les fichiers RAW avec les fichiers XMP associés sans les noms de fichier d'origine. Malgré tout, j'en ai eu très peu et je peux donc vivre heureux sans eux.

3) Inconnu Inconnu

Il est presque certain qu'il y a encore des fichiers non-image que j'ai créés ou mis à jour en 2018, que je n'ai pas encore restaurés et que je me demanderai un jour "Qu'est-il arrivé à ce fichier …?". C'est pourquoi je garde tous les fichiers que PhotoRec restaure pour toujours … juste au cas où.

Conversion de NAS

Sans le répertoire d'origine, il n'y avait pas d'autre solution que de mettre quatre nouveaux disques dans le NAS (ou de formater ceux existants, mais c'était contraire à ma stratégie) et de les configurer à partir de rien et de créer une toute nouvelle matrice RAID. prêt à recevoir les fichiers récupérés.

Lorsque la configuration NAS et RAID était de nouveau opérationnelle, j'ai restauré la plupart des données des sauvegardes Acronis que j'avais précédemment effectuées. Là où il y avait des trous, en particulier en 2017 et dans la seconde moitié de 2018, j'ai dû créer de nouveaux dossiers pour copier ce qui existait avant de glisser-déposer des fichiers des dossiers récupérés et d'autres endroits où j'avais encore des copies des données.

Ensuite, je devais identifier et trouver des fichiers non-images créés ou mis à jour en 2018 en consultant individuellement les formats XLS, DOC, PDF et autres pour trouver les dernières versions. Heureusement, PhotoRec a pu modifier les dates de beaucoup d'entre eux, ce qui m'a permis de filtrer une grande partie des données indésirables, mais certainement pas toutes.

À l'avenir, le NAS ne sera pas affecté d'une lettre de station, mais uniquement disponible via une liaison / association de réseau. L'inconvénient est que certains logiciels ne reconnaissent pas ces liens et vous devez donc accéder aux fichiers via le chemin d'accès réseau, mais je peux vivre avec.

Restaurer Lightroom

C'était relativement simple: ouvrir le répertoire pré-crash m'a montré quels étaient tous les noms de dossiers et chaque image était marquée "!" Le symbole pour indiquer qu'il n'a pas pu être placé. Étant donné qu'Acronis a restauré la plupart des images de mes sauvegardes dans leurs dossiers d'origine, Lightroom a immédiatement été ravi d'utiliser la finition stockée du répertoire.

La question en suspens que je traiterai est que, même si les fichiers récupérés dans PhotoRec se trouvent maintenant au même emplacement que celui que Lightroom avait précédemment lu, les noms de fichier d'origine ont été modifiés de sorte que Lightroom ne peut pas utiliser la finition enregistrée des nouveaux fichiers. Il existe deux méthodes pour résoudre ce problème (i) en comparant les vignettes vues dans Lightroom avec celles des fichiers récupérés pour trouver des correspondances, puis en renommant "F000 …" fichiers pour ceux que Lightroom comprend, ou (ii) "Supprimez" les fichiers existants de Lightroom, puis importez (ajoutez) les fichiers récupérés dans Lightroom et utilisez la nouvelle finition si nécessaire en conservant les nouveaux noms.

Lorsque j'ai retrouvé Lightroom au moment du crash, j'ai ajouté à la nouvelle tâche que j'avais créée sous un autre répertoire. Ce processus de fusion est très simple grâce à la fonction "Importer à partir d'un autre catalogue …" de Lightroom, disponible dans le menu Fichier.

La dernière étape du processus consistait à prendre de nouvelles sauvegardes Acronis à partir du NAS, puis à nettoyer toutes les sauvegardes "supplémentaires" des données que j'avais accumulées au cours du processus de récupération.

Nouvelle stratégie de sauvegarde

Avec le recul, je devais évidemment changer de stratégie de sauvegarde pour me protéger de telles erreurs inhabituelles et de telles défaillances matérielles. Un autre Nikonian a indiqué que je pouvais attacher un disque dur externe au NAS QNAP et faire démarrer le système QNAP à l’avance, ce qui éliminait également la charge de travail de mon PC et le trafic réseau pendant les sauvegardes. Cependant, un nouveau produit QNAP a été lancé au Royaume-Uni en mars 2019, une unité d'extension 4 pantalons pouvant être connectée à mon NAS existant et pouvant être configurée de nombreuses manières, notamment une extension RAID, un système RAID séparé ou simplement en tant qu'individu. floppies. Étant donné que j'ai acheté quatre disques durs de 3 To dans le cadre du processus de récupération, j'utiliserai les disques d'origine de la nouvelle unité d'extension et planifierai des sauvegardes incrémentielles quotidiennes. Les sauvegardes sur des disques externes seront effectuées chaque mois et stockées hors site comme auparavant pour assurer une protection contre le vol et le feu.

conclusion

J'ai eu de la chance (relativement parlant compte tenu des circonstances), car j'ai travaillé toute ma carrière dans l'informatique et que je connais donc très bien l'informatique. Malgré cela, la récupération des données et la reconstruction de mon NAS ont été un exercice long et stressant. Assez cher aussi. Pour ceux qui ne le savent pas, cela dépassera probablement leurs capacités et entraînera une perte de données beaucoup plus importante (ou un coût important de l'assistance d'un spécialiste), de sorte qu'une stratégie de sauvegarde complète est en place.

Enfin, je recommande à tous mes autres Nikoniens de ne pas seulement tordre la douleur que peut provoquer un tel désastre, mais aussi d’en tirer des enseignements. Il est impossible de dire ce que Windows fera avec vous par la suite!

Note éditoriale: Nous abordons ici les ordinateurs et les problèmes associés: forums informatiques, pages Web, partage, cloud, finition et flux de travail