Guide de l'administrateur Veritas NetBackup™ for Hadoop
- Introduction
- Vérifiez les conditions requises et les recommandations pour le plug-in Hadoop for NetBackup
- Configuration de NetBackup for Hadoop
- À propos de la configuration de NetBackup for Hadoop
- Gestion des hôtes de sauvegarde
- Ajout des informations d'authentification Hadoop dans NetBackup
- Configuration du plug-in Hadoop en utilisant le fichier de configuration Hadoop
- Configuration de NetBackup pour un cluster Hadoop hautement disponible
- Configuration d'un port personnalisé pour le cluster Hadoop
- Définition du nombre de threads pour les hôtes de sauvegarde
- Configuration de la communication entre les clusters NetBackup et Hadoop compatibles SSL (HTTPS)
- ECA_TRUST_STORE_PATH pour les serveurs et les clients NetBackup
- ECA_CRL_PATH pour les serveurs et les clients NetBackup
- HADOOP_SECURE_CONNECT_ENABLED pour les serveurs et les clients
- HADOOP_CRL_CHECK pour les serveurs et les clients NetBackup
- Exemples de valeurs pour les paramètres dans le fichier bp.conf
- Configuration pour un cluster Hadoop qui utilise Kerberos
- Configuration des politiques NetBackup pour le plug-in Hadoop
- Reprise après incident d'un cluster Hadoop
- Sauvegardes et restaurations de Hadoop
- Dépannage
- À propos de la résolution des problèmes NetBackup for Hadoop
- À propos de la consignation du débogage NetBackup for Hadoop
- Résolution des problèmes de sauvegarde des données Hadoop
- L'opération de sauvegarde échoue avec l'erreur 6609
- L'opération de sauvegarde a échoué avec l'erreur 6618
- L'opération de sauvegarde échoue avec l'erreur 6647
- Les attributs étendus (xattrs) et les listes de contrôle d'accès (LCA) ne sont pas sauvegardés ou restaurés pour Hadoop
- L'opération de sauvegarde échoue avec l'erreur 6654
- L'opération de sauvegarde échoue avec l'erreur 8857
- L'opération de sauvegarde échoue avec l'erreur 6617
- L'opération de sauvegarde échoue avec l'erreur 6616
- Les fichiers de configuration et de certificats de NetBackup ne sont pas conservés après le redémarrage de l'appliance NetBackup basée sur les conteneurs
- Impossible d'afficher les images de sauvegarde incrémentielle lors de la restauration, alors que les images sont visibles dans la sélection de l'image de sauvegarde
- L'un des travaux de sauvegarde enfant est mis en file d'attente
- Résolution des problèmes de restauration des données Hadoop
- Échec de la restauration avec le code d'erreur 2850
- Le travail de restauration NetBackup pour Hadoop s'exécute partiellement
- Les attributs étendus (xattrs) et les listes de contrôle d'accès (LCA) ne sont pas sauvegardés ou restaurés pour Hadoop
- L'opération de restauration échoue quand les fichiers de plug-in Hadoop manquent sur l'hôte de sauvegarde
- La restauration échoue avec l'erreur bpbrm 54932
- L'opération de restauration échoue avec l'erreur bpbrm 21296
- Le fichier de configuration n'est pas récupéré après une reprise après incident
- Index
Sauvegarde des données Hadoop
Les données Hadoop sont sauvegardées dans des flux parallèles dans lesquels les DataNodes Hadoop transmettent les blocs de données simultanément à plusieurs hôtes de sauvegarde.
Remarque :
Les snapshots doivent être activés sur tous les répertoires spécifiés dans la sélection de sauvegarde Hadoop avant la sauvegarde.
Le diagramme suivant présente le flux de sauvegarde :
Comme illustré dans le diagramme suivant :
Un travail de sauvegarde planifié est déclenché à partir du serveur maître.
Le travail de sauvegarde pour les données Hadoop est un travail composé. Quand le travail de sauvegarde est déclenché, un travail de découverte est exécuté en premier.
Pendant la découverte, le premier hôte de sauvegarde se connecte au NameNode et effectue une découverte pour obtenir des informations sur les données à sauvegarder.
Un fichier de découverte de charge de travail est créé sur l'hôte de sauvegarde. Le fichier de découverte de charge de travail contient les informations des données à sauvegarder à partir des différents DataNodes.
L'hôte de sauvegarde utilise le fichier de découverte de charge de travail et détermine la manière dont cette dernière est répartie entre les hôtes de sauvegarde. Des fichiers de distribution de la charge de travail sont créés pour chaque hôte de sauvegarde.
Des travaux enfants individuels sont exécutés pour chaque hôte de sauvegarde. Comme spécifié dans les fichiers de distribution de la charge de travail, les données sont sauvegardées.
Les blocs de données sont transmis simultanément à partir de différents DataNodes à plusieurs hôtes de sauvegarde.
Le travail de sauvegarde composé ne peut pas se terminer tant que des travaux enfants sont en cours. Une fois les travaux enfants terminés, NetBackup nettoie tous les snapshots du NameNode. Ce n'est qu'à la fin du nettoyage que le travail de sauvegarde composé est terminé.
Se reporter à À propos de la sauvegarde d'un cluster Hadoop.