MapR: Administrar el clúster de MapR

Document created by RSA Information Design and Development on May 3, 2018
Version 1Show Document
  • View in full screen mode
 

Puede administrar el clúster de MapR con los siguientes procedimientos:

Acceder a la interfaz del usuario de MapR Control System para la administración de clústeres

Puede acceder a la interfaz del usuario de MapR Control System para la administración de clústeres de RSA NetWitnessWarehouse. La interfaz del usuario de MapR Control System permite administrar el clúster de RSA NetWitnessWarehouse. La interfaz del usuario de MapR Control System proporciona detalles de lo siguiente:

  • Nodos
  • Mapa de riesgos de nodo
  • Trabajos
  • Tablas de MapR
  • Volúmenes
  • Espejeados
  • Uso de disco de usuario
  • Instantáneas
  • Calendarios
  • Configuración de NFS
  • Asignaciones de IP virtual
  • Nodos de NFS
  • Alarmas de nodo
  • Alarmas de volumen
  • Alarmas de usuario/grupo
  • HBase
  • JobTracker
  • CLDB

Para acceder a la interfaz del usuario de MapR Control System:

  1. Inicie sesión en uno de los dispositivos del clúster de RSA NetWitnessWarehouse.
  2. Inicie el servidor web. Escriba el siguiente comando:

    /opt/mapr/adminuiapp/webserver start

    Nota: El puerto predeterminado usado por el servidor web es 8443.

    Nota: Si recibe el error /opt/mapr/conf/ssl_keystore (No such file or directory) en /opt/mapr/logs/adminuiapp.log después de ejecutar el comando /opt/mapr/adminuiapp/webserver start, escriba los siguientes comandos:
    ./configure.sh -R –genkeys
    service mapr-warden restart

  3. Con un navegador web, acceda a MapR Control System y escriba la siguiente URL:

    https://<NODE-IP-OR-HOSTNAME>:8443

    Se muestra la interfaz del usuario de MapR Control System.
    Interfaz del usuario de MapR Control System

Habilitar métricas de MapR en el clúster RSA NetWitnessWarehouse

Habilitar métricas de MapR en el clúster RSA NetWitnessWarehouse. Este procedimiento opcional permite a los administradores ver detalles de trabajos en la interfaz del usuario de MapR Control System en lugar de acudir a JobTracker para obtener detalles.

Requisitos previos

Asegúrese de tener las siguientes dependencias de métricas de MapR instaladas en el ambiente:

  • MySQL Server instalado y configurado.
  • Bibliotecas alojadas en el repositorio de EPEL. 
  • Bibliotecas alojadas en los repositorios de base de CentOS.

Para habilitar métricas de MapR

Para habilitar métricas de MapR en el clúster de RSA NetWitnessWarehouse, siga las instrucciones de los siguientes vínculos:

Nota: Asegúrese de instalar las métricas de MapR en los nodos del clúster de RSA NetWitnessWarehouse donde se ejecuta Job Tracker o el servidor web.

Editar y eliminar direcciones IP virtuales (línea de comandos)

Puede editar y quitar direcciones IP virtuales en el clúster de Warehouse mediante la línea de comandos. Este procedimiento es opcional y se usa cuando se desean cambiar las direcciones IP virtuales en el clúster de Warehouse.

La adición de dispositivos Warehouse a un grupo de direcciones IP virtuales y su eliminación de este se llevan a cabo mediante la ejecución de un comando edit. Es lo mismo que el comando add, salvo que TODAS las direcciones MAC se reemplazan SOLO por las direcciones MAC que se ingresan.

Requisitos previos

Asegúrese de anotar las direcciones MAC de todos los dispositivos Warehouse del clúster. Utilice el siguiente comando en el dispositivo para ver la dirección MAC del dispositivo:

ifconfig <interface> | grep HWaddr

donde <interface> es la interfaz de red.

Anote también las direcciones MAC de los dispositivos Warehouse que desea agregar.

Para agregar o eliminar una dirección IP virtual en el dispositivo Warehouse primario:

  1. Inicie sesión en el dispositivo principal como usuario raíz.
  2. Edite la dirección IP virtual. Escriba el siguiente comando:

    maprcli virtualip edit -virtualip <VIP_address> -netmask <netmask> -macs <mac_node1> <mac_node2> <mac_node3> ……< mac_node n>

    donde:

    • <VIP_address> es la dirección IP virtual del dispositivo Warehouse primario.
    • <netmask> es la dirección de máscara de red del dispositivo Warehouse primario.
    • <mac_node1> es la dirección MAC del primer nodo del clúster de Warehouse.
    • <mac_node2> es la dirección MAC del segundo nodo del clúster de Warehouse.

    Por ejemplo, si la dirección IP de Warehouse primario es 192.168.100.10 y la dirección MAC del nodo 1 es 01:Z1:1X:00:20:Y1, y del nodo 2 es 32:Y2:4Z:40:10:X3,, y desea agregar el nodo 3, cuya dirección es 20:Y2:4Z:20:10:X3, ingrese lo siguiente:

    maprcli virtualip edit -virtualip 192.168.100.10 -netmask <netmask> -macs 01:Z1:1X:00:20:Y1 32:Y2:4Z:40:10:X3 20:Y2:4Z:20:10:X3

  3. Verifique las direcciones IP virtuales. Escriba el siguiente comando:

    maprcli virtualip list

Para quitar por completo la dirección IP virtual del grupo de dispositivos Warehouse primarios:
Escriba el siguiente comando:

maprcli virtualip remove -virtualip 192.168.100.10

Agregar y eliminar una dirección IP virtual (interfaz del usuario de MapR)

Puede agregar una dirección IP virtual del clúster de Warehouse mediante MapR Control System.  Este procedimiento es opcional y se usa cuando se desea agregar una dirección IP virtual (VIP) en el clúster de Warehouse.

Requisitos previos

Antes de realizar este procedimiento, siga las instrucciones que aparecen en Acceder a la interfaz del usuario de MapR Control System para la administración de clústeres

  1. Inicie sesión en MapR Control System.
    Inicie sesión en MapR Control System
  2. En el panel Navegación, seleccione HA de NFS > Configuración de NFS.
    Se muestra la pestaña Configuración de NFS. Esta pestaña permite editar, eliminar o agregar VIP en el clúster de Warehouse.
  3. En la pestaña Configuración de NFS, haga clic en el botón Agregar VIP.
    Agregar botón VIP

Se muestra el cuadro de diálogo Agregar IP virtual.
Se muestra el cuadro de diálogo Agregar IP virtual

  1. En el cuadro de diálogo Agregar dirección IP virtual, realice lo siguiente:
    1. En el campo VIP de inicio, escriba la dirección IP de inicio para la VIP.
    2. En el campo VIP de finalización, escriba la dirección IP de finalización para la VIP. Si deja este campo en blanco, solo se usa una dirección IP para la asignación de VIP.
    3. En el campo Máscara de red, escriba la máscara de red de la implementación.
    4. Elija Seleccionar interfaces de red deseadas para seleccionar las interfaces de red disponibles que se deben usar para la asignación de VIP. Seleccione todas las interfaces externas en la lista de nodos disponibles. Para esto, haga clic en el botón con el signo más al lado de la entrada de la interfaz. Las interfaces seleccionadas aparecerán en la lista inferior. 
    5. Haga clic en Aceptar para agregar la VIP.
      La VIP que acaba de agregar aparece en la lista de la pestaña Configuración de NFS.
      Pestaña Configuración de NFS

Nota: La asignación de la VIP también se puede eliminar o editar en la pestaña HA de NFS > Configuración de NFS si se selecciona una VIP y se hace clic en el botón Editar o Eliminar.

  1. En el panel Navegación, seleccione HA de NFS > Asignación de VIP para ver el nodo asignado a la VIP que acaba de agregar.
    Asignación de VIP

Agregar una dirección IP virtual con múltiples nodos (interfaz del usuario de MapR)

Puede agregar una dirección IP virtual (VIP) con múltiples nodos. La dirección IP virtual (VIP) es una técnica que se usa para balancear la carga del acceso a datos en HDFS mediante el uso de una dirección IP flotante entre los nodos del clúster. Esta técnica la usa principalmente la distribución de Hadoop de MapR junto con el servicio MapR-NFS. VIP puede proporcionar alta disponibilidad y balanceo de carga con la asignación dinámica de la dirección IP flotante entre los nodos.

Configuración óptima de VIP

Se recomienda usar una VIP para cada tres nodos, debido a que, de manera predeterminada, el factor de replicación para HDFS es 3. Esto también ayuda a optimizar el rendimiento del clúster.

En el caso de una alta carga de datos (más de 20,000 EPS), un único NFS podría experimentar una sobrecarga durante la replicación del archivo al clúster. Si el servidor de NFS sufre una falla general antes de que se repliquen los datos, podría perder datos.

Varios servidores de NFS también permiten una mayor distribución local de los datos, lo cual contribuye a la alta disponibilidad y la tolerancia a fallas.

Requisitos previos

Calcule para cuántas VIP tiene capacidad. 

  • Se sugiere una VIP por tres nodos
  • En caso de que la cantidad de nodos existentes no sea múltiplo de tres, puede asignar varias VIP a más de tres nodos. Por ejemplo, dos VIP entre cinco nodos.

Los pasos para agregar la VIP son iguales que los necesarios para agregar cualquier otra VIP, pero en lugar de elegir “todos los nodos” para la VIP, seleccione un subconjunto de nodos para que participen en esta.

Configuración óptima con Warehouse Connector

La configuración recomendada es tener una VIP por Warehouse Connector. Cuando existan más Warehouse Connectors que VIP, configure varios Warehouse Connectors para que escriban en una VIP de modo que tráfico en las VIP se pueda normalizar.

Agregar una dirección IP virtual que tiene varios nodos

  1. Inicie sesión en MapR Control System.
  2. En el panel Navegación, seleccione HA de NFS > Asignaciones de VIP.
  3. En la pestaña Configuración de NFS, haga clic en el botón Agregar VIP.

    Agregar botón VIP

  4. En el cuadro de diálogo Agregar dirección IP virtual, realice lo siguiente:

    1. Especifique la VIP inicial y final como la misma dirección IP.
      Especifique la VIP inicial y final
    2. Elija Seleccionar interfaces de red deseadas para seleccionar las interfaces de red disponibles que se deben usar para la asignación de VIP. Seleccione las tarjetas NIC que desea que participen en la VIP.  Un nodo puede tener varias NIC; por lo tanto, puede seleccionarlas en función de la configuración de la red.
    3. Haga clic en Aceptar para agregar la VIP.

Ejemplo de configuraciones de VIP

En la siguiente tabla se muestra un ejemplo de configuraciones de direcciones IP virtuales (VIP) con distintos números de nodos en el clúster.

                                 
Cantidad de nodos en el clúster Cantidad de VIP
3 nodosUna VIP
5 nodosDos VIP (tres nodos cada una, un nodo común)
7 nodosDos VIP (tres nodos cada una, un nodo disponible)
8 nodosTres VIP (tres nodos cada una, un nodo común entre dos VIP)
11 nodosCuatro VIP (tres nodos cada una, un nodo común entre dos VIP)
11 nodosTres VIP (tres nodos cada una, dos nodos disponibles)
You are here
Table of Contents > Administrar MapR

Attachments

    Outcomes