Recherche dans <book_title>…

Guide de déduplication VeritasNetBackup™

Last Published: 2021-10-12

Product(s): NetBackup (9.1)

À propos des éléments de configuration dans cloud.json, contentrouter.cfg et spa.cfg

Le fichier cloud.json est disponible à l'emplacement suivant : <STORAGE>/etc/puredisk/cloud.json.

Le fichier contient les paramètres suivants :

Paramètre	Détails	Valeur par défaut
UseMemForUpload	Si elle est définie sur Vrai, le répertoire du cache de chargement est monté dans la mémoire en tant que tmpfs. Pour le cloud haut débit, il est particulièrement utile que la vitesse de disque représente un goulot d'étranglement. Elle peut également réduire la concurrence de disque avec la LSU locale. La valeur est définie sur true si la mémoire système est suffisante. La valeur par défaut est true si la mémoire disponible est suffisante.	Vrai
CachePath	Chemin d'accès du cache. Il est créé sous un volume MSDP en fonction de l'utilisation de l'espace des volumes MSDP. Il réserve un espace au-delà duquel la LSU locale ne peut pas écrire. Il n'est généralement pas nécessaire de modifier ce chemin d'accès, sauf dans le cas où certains volumes sont beaucoup plus libres que d'autres, les différentes LSU cloud peuvent être réparties sur le même volume de disque. Pour améliorer les performances, cette option peut être modifiée afin de les distribuer à différents volumes. Ce chemin d'accès peut être modifié pour résider dans un volume autre que MSDP.	N/A
UploadCacheGB	Il s'agit de l'utilisation d'espace maximale du cache de chargement. Le cache de chargement est un sous-répertoire nommé "chargement" sous CachePath. Pour améliorer les performances, il doit être défini sur une valeur supérieure à : (nombre maximal de flux d'écriture simultanés) * MaxFileSizeMB * 2. Ainsi, pour 100 flux simultanés, environ 13 Go suffisent. Remarque : La valeur initiale de UploadCacheGB dans le fichier `cloud.json` est la valeur de CloudUploadCacheSize dans le fichier contentrouter.cfg. Lorsqu'une nouvelle LSU cloud est ajoutée, la valeur de UploadCacheGB est égale à CloudUploadCacheSize. Cette valeur peut être modifiée ultérieurement dans le fichier `cloud.json`.	12
DownloadDataCacheGB	Il s'agit de l'utilisation d'espace maximale du fichier de données, principalement le fichier `SO BIN`. Plus la taille du cache est importante, plus le nombre de fichiers de données qu'il peut héberger est important. Il est alors inutile de télécharger ces fichiers à partir du cloud lors de la restauration. Remarque : La valeur initiale de DownloadDataCacheGB dans le fichier `cloud.json` est la valeur de CloudDataCacheSize dans le fichier contentrouter.cfg. Lorsqu'une nouvelle LSU cloud est ajoutée, la valeur de DownloadDataCacheGB est égale à CloudDataCacheSize. Cette valeur peut être modifiée ultérieurement dans le fichier `cloud.json`.	500
DownloadMetaCacheGB	Il s'agit de l'utilisation d'espace maximale du fichier de métadonnées, principalement le fichier `DO` et le fichier `SO BHD`. Plus la taille du cache est importante, plus le nombre de fichiers de métadonnées qu'il peut héberger est important. Il est alors inutile de télécharger ces fichiers à partir du cloud lors de la restauration. Remarque : La valeur initiale de DownloadMetaCacheGB dans le fichier `cloud.json` est la valeur de CloudMetaCacheSize dans le fichier contentrouter.cfg. Lorsqu'une nouvelle LSU cloud est ajoutée, la valeur de DownloadMetaCacheGB est égale à CloudMetaCacheSize. Cette valeur peut être modifiée ultérieurement dans le fichier `cloud.json`.	500
MapCacheGB	Il s'agit de l'utilisation d'espace maximale du fichier `map` utilisée pour la compatibilité de la signature de type MD5. Plus la taille du cache est importante, plus le nombre de fichiers `map` que ce dernier peut héberger est important. Remarque : La valeur initiale de MapCacheGB dans le fichier `cloud.json` est la valeur de CloudMapCacheSize dans le fichier contentrouter.cfg. Lorsqu'une nouvelle LSU cloud est ajoutée, la valeur de MapCacheGB est égale à CloudMapCacheSize. Cette valeur peut être modifiée ultérieurement dans le fichier `cloud.json`.	5
UploadConnNum	Nombre maximal de connexions simultanées au fournisseur cloud pour le chargement. L'augmentation de cette valeur est particulièrement utile pour le réseau à latence élevée.	60
DataDownloadConnNum	Nombre maximal de connexions simultanées au fournisseur cloud pour le téléchargement de données. L'augmentation de cette valeur est particulièrement utile pour le réseau à latence élevée.	40
MetaDownloadConnNum	Nombre maximal de connexions simultanées au fournisseur cloud pour le téléchargement de métadonnées. L'augmentation de cette valeur est particulièrement utile pour le réseau à latence élevée.	40
MapConnNum	Nombre maximal de connexions simultanées au fournisseur cloud pour le téléchargement du fichier map.	40
DeleteConnNum	Nombre maximal de connexions simultanées au fournisseur cloud pour la suppression. L'augmentation de cette valeur est particulièrement utile pour le réseau à latence élevée.	100
KeepData	Conservez les données chargées dans le cache de données. La valeur est toujours Faux si UseMem est Vrai.	Faux
KeepMeta	Conservez les métadonnées chargées dans le cache de métadonnées, la valeur est toujours Faux si UseMem est Vrai.	Faux
ReadOnly	La LSU est en lecture seule. Impossible d'écrire sur cette LSU et de la supprimer.	Faux
MaxFileSizeMB	Taille maximale du fichier bin en Mo.	64
WriteThreadNum	Nombre de threads permettant d'enregistrer des données dans le conteneur de données en parallèle afin d'améliorer les performances de l'E/S.	2
RebaseThresholdMB	Seuil de changement de base (Mo). Lorsque les données d'image dans le conteneur sont inférieures au seuil, les données d'image de ce conteneur ne seront pas utilisées pour la déduplication afin d'atteindre une bonne localité. Valeurs autorisées : 0 à la moitié de MaxFileSizeMB, 0 = désactivé	4

Le fichier contentrouter.cfg est disponible à l'emplacement suivant : <STORAGE>/etc/puredisk/contentrouter.cfg.

Le fichier contient les paramètres suivants :

Paramètre	Détails	Valeur par défaut
CloudDataCacheSize	Taille du cache de données par défaut lors de l'ajout de la LSU cloud. Diminuez cette valeur si l'espace libre disponible est insuffisant.	500 Gio
CloudMapCacheSize	Taille du cache du fichier map par défaut lors de l'ajout de la LSU cloud. Diminuez cette valeur si l'espace libre disponible est insuffisant.	5 Gio
CloudMetaCacheSize	Taille du cache de métadonnées par défaut lors de l'ajout de la LSU cloud. Diminuez cette valeur si l'espace libre disponible est insuffisant.	500 Gio
CloudUploadCacheSize	Taille du cache de chargement par défaut lors de l'ajout de la LSU cloud. La valeur minimale est 12 Gio.	12 Gio
MaxCloudCacheSize	Spécifiez la taille maximale du cache cloud en pourcentage. Elle est basée sur la mémoire système totale (espace d'échange exclu).	20 %
CloudBits	Nombre d'entrées de niveau supérieur dans le cache cloud. Ce nombre est (2^CloudBits). L'augmentation de cette valeur améliore les performances du cache, aux dépens de l'utilisation de la mémoire supplémentaire. Valeur minimale = 16, valeur maximale = 48.	Taille automatique selon MaxCloudCacheSize
DCSCANDownloadTmpPath	Lors de l'utilisation de dcscan afin de vérifier la LSU cloud, les données sont téléchargées dans ce dossier. Pour plus d'informations, consultez l'outil dcscan dans la section de prise en charge du cloud.	Désactivé
UsableMemoryLimit	Spécifiez la taille de mémoire maximale utilisable en pourcentage. La somme de MaxCacheSize + MaxCloudCacheSize et de la taille du cache de chargement en mémoire du cloud doit être inférieure ou égale à la valeur de UsableMemoryLimit	80 %
MaxSamplingCacheSize	Spécifiez ici la taille maximale du cache d'échantillonnage en pourcentage pour toutes les LSU cloud. UsableMemoryLimit + MaxSamplingCacheSize doit être inférieur ou égal à 95 %. Par défaut, chaque LSU cloud utilise 1 % de mémoire comme cache d'échantillonnage. Lors de son ajout, la 6e LSU cloud ne peut donc pas obtenir la mémoire allouée. Pour résoudre ce problème, essayez de redémarrer les services MSDP. Au redémarrage de MSDP, toutes les LSU cloud allouent de la mémoire de façon égale pour le cache d'échantillonnage et s'assurent que l'utilisation totale de la mémoire ne dépasse pas la limite. La valeur valeur par défaut peut être mise à jour de 1 % pour chaque LSU cloud en ajoutant un élément de configuration LSUSamplingCacheSize sous cet élément.	5 %

L'ajout d'une nouvelle LSU cloud échoue si aucune partition ne dispose d'un espace libre supérieur à ce qui suit :

CloudDataCacheSize + CloudMapCacheSize + CloudMetaCacheSize + CloudUploadCacheSize + WarningSpaceThreshold * partition size

Utilisez la commande crcontrol --dsstat 2 --verbosecloud pour vérifier l'espace de chaque partition.

Remarque :

Chaque LSU cloud dispose d'un répertoire de cache. Ce répertoire est créé sous un volume MSDP sélectionné en fonction de l'utilisation de l'espace disque de tous les volumes MSDP. La LSU cloud réserve de l'espace disque pour le cache de ce volume et la LSU locale ne peut pas utiliser davantage d'espace disque.

L'espace disque réservé initialement pour chaque LSU cloud correspond à la somme des valeurs de UploadCacheGB, DownloadDataCacheGB, DownloadMetaCacheGB, et de MapCacheGB dans le fichier <STORAGE>/etc/puredisk/cloud.json. L'espace disque diminue lorsque les caches sont utilisés.

La sortie crcontrol --dsstat 2 --verbosecloud contient une option Cache :

# crcontrol --dsstat 2 --verbosecloud

=============== Mount point 2 ===============

Path = /msdp/data/dp1/1pdvol

Data storage

Raw Size Used Avail Cache Use%

48.8T 46.8T 861.4G 46.0T 143.5G 2%

Number of containers : 3609

Average container size : 252685915 bytes (240.98MB)

Space allocated for containers : 911943468161 bytes (849.31GB)

Reserved space : 2156777086976 bytes (1.96TB)

Reserved space percentage : 4.0%

L'option Cache est l'espace disque actuellement réservé par le cloud pour ce volume. L'espace disque est la somme de l'espace réservé pour toutes les LSU cloud qui disposent de répertoires de cache sur ce volume. L'espace réellement disponible pour la LSU locale sur ce volume est Avail - Cache.

Le fichier spa.cfg est disponible à l'emplacement suivant : <STORAGE>/etc/puredisk/spa.cfg.

Le fichier contient les paramètres suivants :

Paramètre	Détails	Valeur par défaut
CloudLSUCheckInterval	Intervalle de vérification du statut de la LSU cloud en secondes.	1 800