Skip to main content

Configurar la replicación con disponibilidad alta para un clúster

Puedes configurar una réplica pasiva de todo tu clúster de GitHub Enterprise Server en una ubicación diferentes, lo cual le permitirá tolerar fallos en nodos redundantes.

Acerca de la replicación de disponibilidad alta para clústers

Puedes configurar el despliegue de un clúster de GitHub Enterprise Server para que tenga disponibilidad alta, mientras que un conjunto idéntico de nodos pasivos se sincroniza con los nodos en tu clúster activo. Si las características de hardware o software afectan el centro de datos que alberga tu clúster activo, puedes hacer una recuperación de fallos manual a los nodos de réplica y seguir procesando las solicitudes de los usuarios, minimizando así el impacto del servicio interrumpido.

En el modo de alta disponibilidad, cada nodo activo se sincroniza regularmente con un nodo pasivo correspondiente. El nodo pasivo se ejecuta en espera y no sirve a las aplicaciones ni procesa solicitudes de usuarios.

Te recomendamos configurar la disponibilidad alta como parte de un plan integral de recuperación de desastres para GitHub Enterprise Server. También te recomendamos realizar respaldos constantemente. Para obtener más información, consulta "Configuración de copias de seguridad en el dispositivo".

Prerrequisitos

Hardware y software

Para cada nodo existente en tu clúster activo, necesitarás aprovisionar una segunda máquina virtual con recursos de hardware idénticos. Por ejemplo, si tu clúster tiene 11 nodos y cada nodo tiene 12 vCPUs, 96 GB de RAM, y 750 GB de almacenamiento adjunto, deberás aprovisionar 11 máquinas virtuales en donde cada una tenga 12 vCPUs, 96 GB de RAM, y 750GB de almacenamiento adjunto.

En cada máquina virtual, instala la misma versión de GitHub Enterprise Server que se ejecuta en los nodos en tu clúster activo. No necesitas cargar una licencia ni realizar alguna configuración adicional. Para obtener más información, consulta "Configuración de una instancia de GitHub Enterprise Server".

Nota: Los nodos que pretendes utilizar para la replicación de alta disponibilidad deben ser instancias independientes de GitHub Enterprise Server. No inicialices los nodos pasivos como un segundo clúster.

Red

Debes asignar una dirección IP estática a cada nodo nuevo que aprovisiones, y debes configurar un balanceador de carga para aceptar las conecciones y dirigirlas a los nodos que están a nivel del front-end de tu clúster.

No te recomendamos configurar un firewall entre la red con con tu clúster activo y aquella con tu clúster pasivo. Lalatencia entre las redes con nodos activos y aquellas con nodos pasivos debe ser de menos de 70 milisegundos. Para obtener más información sobre la conectividad de red entre los nodos del clúster pasivo, consulta "Configuración de red del clúster".

Crear una réplica de disponibilidad alta para un clúster

Asignar nodos activos al datacenter primario

Antes de que definas un datacenter secundario para tus nodos pasivos, asegúrate de que has asignado tus nodos activos al datacenter primario.

  1. Ingresa por SSH a cualquier nodo dentro de tu clúster. Para más información, vea "Acceso al shell administrativo (SSH)".

  2. En un editor de texto, abra el archivo de configuración del clúster ubicado en /data/user/common/cluster.conf. Por ejemplo, puedes utilizar Vim.

    sudo vim /data/user/common/cluster.conf
    
  3. Observa el nombre del datacenter primario de tus clústers. La sección [cluster] de la parte superior del archivo de configuración del clúster define el nombre del centro de datos principal, mediante el par clave-valor primary-datacenter. De manera predeterminada, el centro de datos principal del clúster se denomina default.

    [cluster]
      mysql-master = HOSTNAME
      redis-master = HOSTNAME
      primary-datacenter = default
    • Opcionalmente, puedes cambiar el nombre del centro de datos principal por uno más descriptivo o preciso editando el valor de primary-datacenter.
  4. En el archivo de configuración del clúster se enumera cada nodo bajo un título [cluster "HOSTNAME"]. Debajo del encabezado de cada nodo, agrega un par de clave-valor para asignar el nodo a un datacenter. Usa el mismo valor que primary-datacenter del paso 3 anterior. Por ejemplo, si quieres utilizar el nombre predeterminado (default), agrega el siguiente par clave-valor a la sección para cada nodo.

    datacenter = default
    

    Cuando hayas terminado, la sección para cada nodo en el archivo de configuración del clúster se debería ver como en el siguiente ejemplo. El órden de los pares de clave-valor no importa.

    [cluster "HOSTNAME"]
      datacenter = default
      hostname = HOSTNAME
      ipv4 = IP ADDRESS
      ...
    ...

    Nota: Si has cambiado el nombre del centro de datos principal en el paso 3, busca el par clave-valor consul-datacenter en la sección de cada nodo y cambia el valor al centro de datos principal cuyo nombre ha cambiado. Por ejemplo, si has asignado el nombre primary al centro de datos principal, usa el siguiente par clave-valor para cada nodo.

    consul-datacenter = primary
    
  5. Aplica la configuración nueva. Este comando puede tardar un tiempo en finalizar, por lo que se recomienda ejecutarlo en un multiplexor de terminal como screen o tmux.

    ghe-cluster-config-apply
    
  6. Después de que finalice la ejecución de configuración, GitHub Enterprise Server muestra el siguiente mensaje.

    Finished cluster configuration

Después de que GitHub Enterprise Server te regrese al prompt, habrás terminado de asignar tus nodos al datacenter primario del clúster.

Agregar nodos pasivos al archivo de configuración de clúster

Para configurar la disponibilidad alta, debes definir un nodo pasivo correspondiente para cada nodo activo en tu clúster. Con las siguientes instrucciones se crea una configuración de clúster nueva que define tanto los nodos activos como los pasivos. Podrá:

  • Crear una copia del archivo de configuración del clúster activo.
  • Editar la copia para definir los nodos pasivos que corresponden a los nodos activos, agregando las direcciones IP de las máquinas virtuales nuevas que aprovisionaste.
  • Fusionar la copia modificada de la configuración del clúster con tu configuración activa.
  • Aplicar la configuración nueva para comenzar la replicación.

Para ver una configuración de ejemplo, consulta "Configuración de ejemplo".

  1. Para cada nodo en tu clúster, aprovisiona una máquina virtual coincidente con especificaciones idénticas que ejecute la misma versión de GitHub Enterprise Server. Anota la dirección IPv4 y el nombre de host para cada nodo de clúster nuevo. Para obtener más información, consulta "Requisitos previos".

    Nota: Si estás reconfigurando la alta disponibilidad después de una conmutación por error, puedes utilizar los nodos antiguos del centro de datos principal en su lugar.

  2. Ingresa por SSH a cualquier nodo dentro de tu clúster. Para más información, vea "Acceso al shell administrativo (SSH)".

  3. Respalda tu configuración de clúster existente.

    cp /data/user/common/cluster.conf ~/$(date +%Y-%m-%d)-cluster.conf.backup
    
  4. Crea una copia de tu archivo de configuración de clúster en una ubicación temporal, como /home/admin/cluster-passive.conf. Elimina pares clave-valor únicos para direcciones IP (ipv*), UUID (uuid) y claves públicas para WireGuard (wireguard-pubkey).

    grep -Ev "(?:|ipv|uuid|vpn|wireguard\-pubkey)" /data/user/common/cluster.conf > ~/cluster-passive.conf
    
  5. Quita la sección de [cluster] del archivo temporal de configuración de clúster temporal que copiaste en el paso anterior.

    git config -f ~/cluster-passive.conf --remove-section cluster
    
  6. Asigna un nombre para el datacenter secundario en donde aprovisionaste tus nodos pasivos, luego actualiza el archivo temporal de configuración de clúster con el nombre nuevo del datacenter. Reemplaza SECONDARY por el nombre elegido.

    sed -i 's/datacenter = default/datacenter = SECONDARY/g' ~/cluster-passive.conf
  7. Asigna un patrón para los nombres de host del nodo pasivo.

    Advertencia: Los nombres de host para los nodos pasivos deben ser únicos y diferir del nombre de host para el nodo activo correspondiente.

  8. Abre el archivo temporal de configuración de clúster del paso 3 en un editor de texto. Por ejemplo, puedes utilizar Vim.

    sudo vim ~/cluster-passive.conf
  9. En cada sección dentro del archivo temporal de configuración del clúster, actualiza la configuración del nodo. En el archivo de configuración del clúster se enumera cada nodo bajo un título [cluster "HOSTNAME"].

    • Cambia el nombre de host citado en el encabezado de la sección y el valor de hostname dentro de la sección al nombre de host del nodo pasivo, de acuerdo con el patrón que elegiste en el paso 7 anterior.
    • Agrega una nueva clave denominada ipv4 y establece el valor en la dirección IPv4 estática del nodo pasivo.
    • Agrega un nuevo par clave-valor, replica = enabled.
    [cluster "NEW PASSIVE NODE HOSTNAME"]
      ...
      hostname = NEW PASSIVE NODE HOSTNAME
      ipv4 = NEW PASSIVE NODE IPV4 ADDRESS
      replica = enabled
      ...
    ...
  10. Anexa el contenido del archivo temporal de configuración del clúster que creaste en el paso 4 al archivo de configuración activo.

    cat ~/cluster-passive.conf >> /data/user/common/cluster.conf
  11. Designa los nodos de Redis y de MySQL en el datacenter secundario. Reemplaza REPLICA MYSQL PRIMARY HOSTNAME y REPLICA REDIS PRIMARY HOSTNAME por los nombres de host de los nodos pasivos que has aprovisionado para que coincidan con los principales de MySQL y Redis existentes.

    git config -f /data/user/common/cluster.conf cluster.mysql-master-replica REPLICA MYSQL PRIMARY HOSTNAME
    git config -f /data/user/common/cluster.conf cluster.redis-master-replica REPLICA REDIS PRIMARY HOSTNAME

    Advertencia: Revisa el archivo de configuración del clúster antes de continuar.

    • En la sección [cluster] de nivel superior, asegúrate de que los valores de mysql-master-replica y redis-master-replica son los nombres de host correctos para los nodos pasivos del centro de datos secundario que servirán como principales de MySQL y Redis después de una conmutación por error.
    • En cada sección de un nodo activo denominado [cluster "ACTIVE NODE HOSTNAME"], vuelve a comprobar los siguientes pares clave-valor.
      • datacenter debe coincidir con el valor de primary-datacenter de la sección [cluster] de nivel superior.
      • consul-datacenter debe coincidir con el valor de datacenter, que debe ser el mismo que el valor de primary-datacenter en la sección [cluster] de nivel superior.
    • Asegúrate de que, para cada nodo activo, la configuración tiene una sección correspondiente para un nodo pasivo con los mismos roles. En cada sección para un nodo pasivo, verifica nuevamente cada par de clave-valor.
      • datacenter debe coincidir con todos los demás nodos pasivos.
      • consul-datacenter debe coincidir con todos los demás nodos pasivos.
      • hostname debe coincidir con el nombre de host del encabezado de sección.
      • ipv4 debe coincidir con la dirección IPv4 estática única del nodo.
      • replica debe configurarse como enabled.
    • Aprovecha la oportunidad para eliminar las secciones para los nodos sin conexión que ya no se utilicen.

    Para revisar una configuración de ejemplo, consulta "Configuración de ejemplo".

  12. Inicializa la configuración del clúster nuevo. Este comando puede tardar un tiempo en finalizar, por lo que se recomienda ejecutarlo en un multiplexor de terminal como screen o tmux.

    ghe-cluster-config-init
  13. Después de que ésta termine, GitHub Enterprise Server mostrará el siguiente mensaje.

    Finished cluster initialization
  14. Aplica la configuración nueva. Este comando puede tardar un tiempo en finalizar, por lo que se recomienda ejecutarlo en un multiplexor de terminal como screen o tmux.

    ghe-cluster-config-apply
    
  15. Después de que finalice la ejecución de configuración, GitHub Enterprise Server muestra el siguiente mensaje.

    Finished cluster configuration
  16. Configura un balanceador de carga que aceptará las conexiones de los usuarios si conmutas por error a los nodos pasivos. Para obtener más información, consulta "Configuración de red del clúster".

Has terminado de configurar la replicación de disponibilidad alta para los nodos en tu clúster. Cada nodo activo comienza a replicar la configuración y los datos a su nodo pasivo correspondiente, y puedes dirigir el tráfico al balanceador de carga para el datacenter secundario en caso de que exista un fallo. Para obtener más información sobre la conmutación por error, consulta "Iniciar una conmutación por error en el clúster de réplica".

Ejemplo de configuración

La configuración de [cluster] de nivel superior se debería ver como en el ejemplo siguiente.

[cluster]
  mysql-master = HOSTNAME OF ACTIVE MYSQL MASTER
  redis-master = HOSTNAME OF ACTIVE REDIS MASTER
  primary-datacenter = PRIMARY DATACENTER NAME
  mysql-master-replica = HOSTNAME OF PASSIVE MYSQL MASTER
  redis-master-replica = HOSTNAME OF PASSIVE REDIS MASTER
  mysql-auto-failover = false
...

La configuración para un nodo activo en el nivel de almacenamiento de tu clúster se debería ver como en el ejemplo siguiente.

...
[cluster "UNIQUE ACTIVE NODE HOSTNAME"]
  datacenter = default
  hostname = UNIQUE ACTIVE NODE HOSTNAME
  ipv4 = IPV4 ADDRESS
  consul-datacenter = default
  consul-server = true
  git-server = true
  pages-server = true
  mysql-server = true
  elasticsearch-server = true
  redis-server = true
  memcache-server = true
  metrics-server = true
  storage-server = true
  vpn = IPV4 ADDRESS SET AUTOMATICALLY
  uuid = UUID SET AUTOMATICALLY
  wireguard-pubkey = PUBLIC KEY SET AUTOMATICALLY
...

La configuración para el nodo pasivo correspondiente en el nivel de almacenamiento se debería ver como en el ejemplo siguiente.

  • Las diferencias importantes con respecto al nodo activo correspondiente se marcan en negrita.
  • GitHub Enterprise Server asigna valores para vpn, uuid y wireguard-pubkey automáticamente, por lo que no debes definir los valores para los nodos pasivos que inicializarás.
  • Los roles de servidor, definidos mediante claves *-server, coinciden con el nodo activo correspondiente.
...
[cluster "UNIQUE PASSIVE NODE HOSTNAME"]
  replica = enabled
  ipv4 = IPV4 ADDRESS OF NEW VM WITH IDENTICAL RESOURCES
  datacenter = SECONDARY DATACENTER NAME
  hostname = UNIQUE PASSIVE NODE HOSTNAME
  consul-datacenter = SECONDARY DATACENTER NAME
  consul-server = true
  git-server = true
  pages-server = true
  mysql-server = true
  elasticsearch-server = true
  redis-server = true
  memcache-server = true
  metrics-server = true
  storage-server = true
  vpn = DO NOT DEFINE
  uuid = DO NOT DEFINE
  wireguard-pubkey = DO NOT DEFINE
...

Monitorear la replicación entre los nodos de clúster pasivos y activos

La replicación inicial entre los nodos activos y pasivos en tu clúster toma su tiempo. La cantidad de tiempo dependerá de la cantidad de datos a replicar y de los niveles de actividad de GitHub Enterprise Server.

Puedes monitorear el progreso de cualquier nodo en el clúster, utilizando las herramientas de línea de comandos que se encuentran disponibles a través del shell administrativo de GitHub Enterprise Server. Para obtener más información sobre el shell administrativo, consulta "Acceso al shell administrativo (SSH)".

  • Monitorear la replicación de bases de datos:

    /usr/local/share/enterprise/ghe-cluster-status-mysql
    
  • Monitorear la replicación de los datos de los repositorios y los Gists:

    ghe-spokes status
    
  • Monitorear la replicación de los adjuntos y los datos de LFS:

    ghe-storage replication-status
    
  • Monitorear la replicación de los datos de las páginas:

    ghe-dpages replication-status
    

Puedes usar ghe-cluster-status para revisar el estado general del clúster. Para obtener más información, consulta "Utilidades de línea de comandos".

Reconfigurar la replilcación de disponibilidad alta después de un fallo

Después de que te recuperes de un fallo de los nodos activos del clúster hacia los nodos pasivos, puedes reconfigurar la replicación de disponibilidad alta en dos formas.

Aprovisionar y configurar los nodos pasivos nuevos

Después de recuperarte de un fallo, puedes reconfigurar la disponibilidad alta en dos formas. El método que elijas dependerá de la razón por la cual ocurrió el fallo y del estado de los nodos activos originales.

  1. Aprovisiona y configura un conjunto nuevo de nodos pasivos para cada uno de los nodos activos en tu datacenter secundario.

  2. Utiliza los nodos activos antiguos como los nodos pasivos nuevos.

El proceso para reconfigurar la disponibilidad alta es idéntico a la configuración inicial de la misma. Para obtener más información, consulta "Creación de una réplica de alta disponibilidad para un clúster".

Inhabilitar la replicación de disponibilidad alta para un clúster

Pudes parar la replicación hacia los nodos pasivos para el despliegue de GitHub Enterprise Server de tu clúster.

  1. Ingresa por SSH a cualquier nodo dentro de tu clúster. Para más información, vea "Acceso al shell administrativo (SSH)".

  2. En un editor de texto, abra el archivo de configuración del clúster ubicado en /data/user/common/cluster.conf. Por ejemplo, puedes utilizar Vim.

    sudo vim /data/user/common/cluster.conf
    
  3. En la sección [cluster] de nivel superior, elimina los pares clave-valor redis-master-replica y mysql-master-replica.

  4. Borra cada sección para un nodo pasivo. En el caso de los nodos pasivos, replica se configura como enabled.

  5. Aplica la configuración nueva. Este comando puede tardar un tiempo en finalizar, por lo que se recomienda ejecutarlo en un multiplexor de terminal como screen o tmux.

    ghe-cluster-config-apply
    
  6. Después de que finalice la ejecución de configuración, GitHub Enterprise Server muestra el siguiente mensaje.

    Finished cluster configuration

Después de que GitHub Enterprise Server te regrese al prompt, habrás terminado de inhabilitar la replicación de disponibilidad alta.