MapR : Gestion du cluster MapR

Document created by RSA Information Design and Development on Apr 26, 2018
Version 1Show Document
  • View in full screen mode
 

Vous pouvez gérer le cluster MapR à l’aide des procédures suivantes :

Accéder à l'interface utilisateur MapR Control System pour l'administration du cluster

Vous pouvez accéder à l'interface utilisateur MapR Control System pour gérer le cluster RSA NetWitnessWarehouse L'interface utilisateur MapR Control System vous permet d'administrer le cluster RSA NetWitnessWarehouse. L'interface utilisateur MapR Control System comporte les détails suivants :

  • Nodes
  • Nœud Heatmap
  • Tâches
  • Tables MapR
  • Volumes
  • Miroirs
  • Utilisation des disques utilisateur
  • Snapshots
  • Planning
  • Configuration NFS
  • Attributions des IP virtuelles
  • Nœuds NFS
  • Alarmes des nœuds
  • Alarmes des volumes
  • Alarmes des utilisateurs/groupes
  • HBase
  • JobTracker
  • CLDB

Pour accéder à l'interface utilisateur MapR Control System :

  1. Connectez-vous à l'une des appliances dans le cluster RSA NetWitnessWarehouse.
  2. Démarrez le serveur Web. Saisissez la commande suivante :

    /opt/mapr/adminuiapp/webserver start

    Remarque : Le port par défaut utilisé par le serveur Web est 8443.

    Remarque : Si vous recevez l'erreur /opt/mapr/conf/ssl_keystore (No such file or directory) dans le log /opt/mapr/logs/adminuiapp.log après l’exécution de la commande /opt/mapr/adminuiapp/webserver start, saisissez les commandes suivantes :
    ./configure.sh -R –genkeys
    service mapr-warden restart

  3. Utilisez un navigateur Web pour accéder à MapR Control System et saisissez l'URL suivante :

    https://<NODE-IP-OR-HOSTNAME>:8443

    L'interface utilisateur MapR Control System s'affiche.
    Interface utilisateur MapR Control System

Activer les metrics MapR sur le cluster RSA NetWitnessWarehouse

Vous pouvez activer les metrics MapR sur le cluster RSA NetWitnessWarehouse. Cette procédure facultative permet aux administrateurs de voir les détails des tâches dans l'interface utilisateur MapR Control System plutôt que de se rendre dans JobTracker pour plus de détails.

Conditions préalables

Veillez à ce que les conditions préalables relatives aux metrics MapR suivantes soient respectées lors de l'installation dans votre environnement :

  • Serveur MySQL installé et configuré
  • Bibliothèques hébergées sur le référentiel EPEL 
  • Bibliothèques hébergées sur les référentiels de base CentOS

Pour activer les metrics MapR

Pour activer les metrics MapR sur le cluster RSA AnalyticsWarehouse, suivez les instructions des liens suivants :

Remarque : Veillez à installer les metrics MapR sur les nœuds de votre cluster RSA NetWitnessWarehouse, sur lesquels Job Tracker ou Web Server s'exécute.

Modifier et supprimer les adresses IP virtuelles (ligne de commande)

Vous pouvez modifier et supprimer les adresses IP virtuelles dans le cluster Warehouse via la ligne de commande. Cette procédure est facultative et utilisée lorsque vous souhaitez modifier les adresses IP virtuelles dans le cluster Warehouse.

L'ajout d'appliances Warehouse à un groupe d'adresses IP virtuelles ou leur suppression sont possibles via la commande edit. Cette commande est semblable à la commande add à ceci près que TOUTES les adresses MAC sont remplacées UNIQUEMENT par les adresses MAC que vous saisissez.

Conditions préalables

Assurez-vous de prendre note des adresses MAC de toutes les appliances Warehouse dans le cluster. Utilisez la commande suivante sur l'appliance pour afficher son adresse MAC :

ifconfig <interface> | grep HWaddr

<interface> est l'interface réseau.

Notez également les adresses MAC des appliances Warehouse à ajouter.

Pour ajouter ou supprimer une adresse IP virtuelle de l'appliance principale Warehouse :

  1. Connectez-vous à l'appliance principale en tant qu'utilisateur root.
  2. Modifiez l'adresse IP virtuelle. Saisissez la commande suivante :

    maprcli virtualip edit -virtualip <VIP_address> -netmask <netmask> -macs <mac_node1> <mac_node2> <mac_node3> ……< mac_node n>

    où :

    • <VIP_address> est l'adresse IP virtuelle de l'appliance Warehouse principale.
    • <netmask> est l'adresse du masque réseau de l'appliance Warehouse principale.
    • <mac_node1> est l'adresse MAC du premier nœud dans le cluster Warehouse.
    • <mac_node2> est l'adresse MAC du second nœud dans le cluster Warehouse.

    Par exemple, si l'adresse IP du service primaire Warehouse est 192.168.100.10 et que l'adresse MAC du nœud 1 est 01:Z1:1X:00:20:Y1,, que le nœud 2 est 32:Y2:4Z:40:10:X3, et que vous souhaitez ajouter le nœud 3, 20:Y2:4Z:20:10:X3, saisissez la commande suivante :

    maprcli virtualip edit -virtualip 192.168.100.10 -netmask <netmask> -macs 01:Z1:1X:00:20:Y1 32:Y2:4Z:40:10:X3 20:Y2:4Z:20:10:X3

  3. Vérifiez les adresses IP virtuelles. Saisissez la commande suivante :

    maprcli virtualip list

Pour supprimer l'adresse IP virtuelle du groupe d'appliances principales Warehouse :
Saisissez la commande suivante :

maprcli virtualip remove -virtualip 192.168.100.10

Ajouter et supprimer une adresse IP virtuelle (interface utilisateur MapR)

Vous pouvez ajouter une adresse IP virtuelle dans le cluster Warehouse via MapR Control System.  Cette procédure est facultative et utilisée lorsque vous souhaitez ajouter une adresse IP virtuelle (VIP) dans le cluster Warehouse.

Conditions préalables

Suivez les instructions du document Accès à l'interface utilisateur de MapR Control System pour l'administration de cluster avant d'effectuer cette procédure. 

  1. Connectez-vous à MapR Control System.
    Connectez-vous à MapR Control System.
  2. Dans le panneau de navigation, sélectionnez NFS HA > Configuration NFS.
    L'onglet Configuration NFS s'affiche. L'onglet Configuration NFS permet de modifier, supprimer ou ajouter des VIP dans le cluster Warehouse.
  3. Sous l'onglet Configuration NFS, cliquez sur le bouton Ajouter VIP.
    Bouton Ajouter VIP

La page Ajouter une adresse IP virtuelle apparaît.
La page Ajouter une adresse IP virtuelle apparaît

  1. Dans la boîte de dialogue Ajouter une adresse IP virtuelle, procédez comme suit :
    1. Dans le champAdresse VIP de démarrage, saisissez l'adresse IP de démarrage de VIP.
    2. Dans le champ Adresse VIP de fin, saisissez l'adresse IP de fin de VIP. Si ce champ est laissé vide, une seule adresse IP est utilisée pour l'allocation d'adresse IP virtuelle.
    3. Dans le champ Masque de réseau, saisissez le masque de réseau pour le déploiement.
    4. Sélectionnez Sélectionner les interfaces réseau souhaitées pour choisir les interfaces réseau disponibles qui doivent être utilisées pour l'allocation des VIP. Sélectionnez toutes les interfaces externes à partir de la liste des nœuds disponibles en cliquant sur le bouton plus à côté de l'entrée de l'interface. Les interfaces sélectionnées apparaissent dans la liste du bas. 
    5. Cliquez sur OK pour ajouter l'adresse IP virtuelle.
      La nouvelle adresse VIP ajoutée s'affiche dans la liste sur l'onglet Configuration NFS.
      Onglet Configuration NFS

Remarque : L'allocation d'adresse IP virtuelle peut également être supprimée ou modifiée à partir de l'onglet NFS HA > Configuration NFS en sélectionnant une adresse IP virtuelle et en cliquant sur le bouton Modifier ou Supprimer.

  1. Dans le panneau de navigation, sélectionnez NFS HA > Allocation d'adresse VIP pour afficher le nœud qui est attribué à la nouvelle adresse VIP ajoutée.
    Allocation des VIP

Ajouter une adresse IP virtuelle avec plusieurs nœuds (interface utilisateur MapR)

Vous pouvez ajouter une adresse IP virtuelle (VIP) avec plusieurs nœuds. L'adresse IP virtuelle (VIP) est une technique utilisée pour équilibrer la charge de l'accès aux données dans HDFS en utilisant une adresse IP flottante parmi les nœuds de cluster. Cette technique est principalement utilisée par la distribution MapR Hadoop en plus du service MapR-NFS. VIP peut fournir une disponibilité élevée et un équilibrage des charges en allouant dynamiquement l'adresse IP flottante parmi les nœuds.

Configuration VIP optimale

Nous recommandons l'utilisation d'une VIP pour trois nœuds, car le facteur de réplication pour HDFS est de 3 par défaut. Ceci aide également à optimiser les performances du cluster.

Dans le cas d'une charge de données élevée (> 20 000 EPS), un seul NFS peut être surchargé lors de la réplication du fichier dans le cluster. Si le serveur NFS se bloque avant la réplication des données, vous pouvez perdre des données.

Plusieurs serveurs NFS permettent également une localité de données plus distribuée, qui aide à offrir une haute disponibilité et une tolérance aux pannes.

Conditions préalables

Calculez le nombre de VIP que vous pouvez utiliser. 

  • Nous suggérons Une VIP pour 3 nœuds
  • Si le nombre de nœuds que vous possédez n'est pas un multiple de trois, vous pouvez attribuer plusieurs VIP à plus de trois nœuds. Par exemple, deux VIP pour cinq nœuds.

Les étapes permettant d'ajouter la VIP sont identiques à celles permettant d'ajouter une autre VIP, mais au lieu de choisir « tous les nœuds » pour la VIP, vous choisissez un sous-ensemble de nœuds participant à la VIP.

Configuration optimale avec Warehouse Connector

La configuration recommandée consiste à avoir une VIP par Warehouse Connector. Dans les cas où le nombre de Warehouse Connector est supérieur aux VIP, configurez plusieurs Warehouse Connectors pour écrire sur une VIP de façon à ce que le trafic des VIP soit normalisé.

Ajouter une adresse IP virtuelle qui possède plusieurs nœuds

  1. Connectez-vous à MapR Control System.
  2. Dans le panneau Navigation, sélectionnez NFS-HA > Attributions VIP.
  3. Sous l'onglet Configuration NFS, cliquez sur le bouton Ajouter VIP.

    Bouton Ajouter VIP

  4. Dans la boîte de dialogue Ajouter une adresse IP virtuelle, procédez comme suit :

    1. Précisez la VIP de début et de fin en tant que même adresse IP.
      Spécifiez les VIP de début et de fin.
    2. Sélectionnez Sélectionner les interfaces réseau souhaitées pour choisir les interfaces réseau disponibles qui doivent être utilisées pour l'affectation VIP. Sélectionnez les cartes NIP que vous souhaitez inclure dans la VIP.  Un nœud peut posséder plusieurs NIC. Vous pouvez les sélectionner selon la configuration réseau.
    3. Cliquez sur OK pour ajouter l'adresse IP virtuelle.

Exemple de configurations VIP

Le tableau suivant présente les exemples de configurations d'adresses IP virtuelles (VIP) avec différents nombres de nœuds dans le cluster.

                                 
Nombre de nœuds dans le cluster Nombre de VIP
3 nœuds1 VIP
5 nœuds2 VIP (3 nœuds chacune, 1 nœud commun)
7 nœuds2 VIP (3 nœuds chacune, 1 nœud libre)
8 nœuds3 VIP (3 nœuds chacune, 1 nœud commun parmi 2 VIP)
11 nœuds4 VIP (3 nœuds chacune, 1 nœud commun parmi 2 VIP)
11 nœuds3 VIP (3 nœuds chacune, 2 nœuds libres)
You are here
Table of Contents > Gérer les MapR

Attachments

    Outcomes