Un clúster Dynatrace Managed nunca está congelado. El parque monitorizado crece, un equipo activa el Real User Monitoring en una aplicación de mucho tráfico, un servidor llega al fin de su garantía: tarde o temprano hay que añadir un nodo, sustituir uno o retirar otro. Estas operaciones sobre un nodo del clúster Managed corresponden a tu equipo: aparentemente sencillas, afectan directamente a las bases de datos distribuidas que sostienen tus datos.
Es un tema típicamente Managed: eres responsable de la capacidad y de la topología del clúster. Una incorporación mal preparada puede saturar la red durante la redistribución de los datos; una retirada precipitada puede hacer perder trazas o, peor aún, debilitar la replicación.
Este artículo explica qué ocurre durante estas operaciones y propone después dos procedimientos paso a paso: añadir un nodo y retirar un nodo de forma limpia.
Qué ocurre al añadir un nodo
Cuando un nodo nuevo se une al clúster, instala la misma pila que los demás (servidor, proxy frontal, Cassandra, Elasticsearch, almacenamiento de transacciones). Las bases de datos distribuidas redistribuyen entonces una parte de los datos hacia ese nodo para equilibrar la carga. Durante esta fase:
- el tráfico de red entre nodos aumenta de forma notable;
- los discos de los nodos existentes se ven exigidos en lectura;
- el nuevo nodo empieza a recibir tráfico de agentes cuando se declara operativo.
El clúster sigue disponible, pero conviene planificar la incorporación fuera de los picos de actividad.
Qué ocurre al retirar un nodo
Retirar un nodo implica lo contrario: sus datos replicados deben reconstruirse en otro lugar para mantener el factor de replicación. Las trazas almacenadas localmente en su almacenamiento de transacciones, generalmente sin replicar, se pierden. Por eso hay que comprobar que los nodos restantes disponen de CPU, memoria y, sobre todo, disco suficientes para absorber la carga.
| Operación | Duración típica | Riesgo principal |
|---|---|---|
| Añadir un nodo | Sincronización completa en unas horas | Carga de red y de disco durante la redistribución |
| Retirar un nodo sano | Al menos 24 h antes de retirar el siguiente | Saturación de disco en los nodos restantes |
| Sustituir un nodo averiado | Variable | Ventana en la que la replicación está degradada |
Estas duraciones son orientativas y dependen mucho del volumen almacenado y de la red: compruébalas en tu contexto.
Requisitos comunes
- Una copia de seguridad completa reciente y correcta (consulta copia de seguridad y restauración de un clúster).
- Todos los nodos existentes en estado sano en la CMC y en la misma versión.
- El nuevo servidor validado con la misma checklist de requisitos que los demás (SO, recursos, discos, NTP, DNS).
- Los puertos entre nodos abiertos en ambos sentidos entre el nuevo servidor y cada uno de los nodos existentes.
- Una sola operación de topología a la vez: no encadenes una incorporación y una retirada sin esperar a que termine la anterior.
Tutorial paso a paso: añadir un nodo del clúster Managed
Paso 1: verificar el estado del clúster
En la CMC, abre la vista de nodos y comprueba que todos están en buen estado, sin ninguna actualización en curso. Revisa el espacio en disco de cada nodo:
df -h /var/opt/dynatrace-managed
Paso 2: preparar el nuevo servidor
nproc; free -g
lsblk -o NAME,SIZE,ROTA,MOUNTPOINT
chronyc tracking
curl -sv --connect-timeout 5 https://{ip-noeud-existant}/ 2>&1 | grep -i connected
El servidor debe tener el mismo perfil de hardware que los nodos existentes.
Paso 3: obtener el comando de incorporación en la CMC
En la CMC, abre Deployment Status y después Install cluster node. La consola muestra un comando wget que debes ejecutar en el nuevo servidor: descarga el instalador correspondiente a la versión del clúster. Cópialo tal cual, sin modificarlo ni guardarlo en un ticket público. Si reinstalas en un host retirado hace poco, espera 72 horas antes de reutilizar la misma dirección IP.
Paso 4: ejecutar el comando en el nuevo servidor
Conéctate como root y pega el comando proporcionado. Suele consistir en una descarga seguida de la ejecución de dynatrace-managed-{version}.sh con los parámetros de enrolamiento. Sigue la salida y responde a las posibles preguntas sobre las rutas de almacenamiento repitiendo las mismas decisiones que en los demás nodos.
Paso 5: seguir la integración
systemctl list-units --type=service | grep -i dynatrace
sudo /opt/dynatrace-managed/utils/cassandra-nodetool.sh status
En la CMC, el nodo aparece primero con el estado joining; en Cassandra, aparece marcado como UJ hasta el final de la sincronización. No añadas otro nodo antes de que termine. Una vez hechas todas las incorporaciones, cassandra-nodetool.sh cleanup en los nodos antiguos libera el espacio de los datos de los que ya no son responsables. Vigila también la carga de red y de disco de los nodos existentes durante la redistribución.
Paso 6: actualizar el ecosistema
- Añade el nodo al balanceador de carga externo, si hay uno delante del clúster.
- Comprueba que el certificado cubre el nuevo nodo si los agentes se conectan a él por su nombre.
- Los OneAgent y los ActiveGate descubren automáticamente los nuevos puntos de conexión; compruébalo en un host con
oneagentctl --get-server. - Verifica que el recurso compartido de copias de seguridad está montado en el nuevo nodo en la misma ruta.
Tutorial paso a paso: retirar un nodo
Paso 1: evaluar la capacidad restante
Suma el espacio usado en todos los nodos y comprueba que los nodos restantes pueden absorberlo con un margen cómodo. Con tres nodos, no retires uno sin haber añadido antes otro: perderías la replicación completa.
du -sh /var/opt/dynatrace-managed/* 2>/dev/null | sort -h
Paso 2: lanzar una copia de seguridad
Lanza o espera una copia de seguridad completa y comprueba su estado en la CMC.
Paso 3: retirar el nodo desde la CMC
Conéctate a través de un nodo que vayas a conservar. En Deployment Status > Cluster nodes, abre el nodo y, en el menú …, elige primero Disable OneAgent traffic. La documentación recomienda esperar después el tiempo de retención del almacenamiento de transacciones (hasta 35 días), ya que esos datos no son redundantes. Por último, usa Remove node: el nodo se detiene y se desinstala.
Paso 4: esperar al final y comprobar
Las réplicas de las métricas se redistribuyen entre los nodos restantes en un máximo de 24 horas: no retires otro nodo antes. Comprueba entonces el estado de salud de los nodos restantes, el espacio en disco y la ausencia de alertas de replicación.
Paso 5: limpiar la infraestructura
- Retira el nodo del balanceador de carga, del DNS y de las reglas de firewall.
- Desmantela el servidor según tu política (borrado seguro de los discos).
- Actualiza la documentación de arquitectura y el inventario.
Buenas prácticas
- Una operación de topología a la vez, y nunca durante una actualización del clúster.
- Para sustituir un servidor, añade primero el nuevo nodo y retira después el antiguo.
- Planifica las operaciones fuera de las horas punta y avisa a los equipos usuarios.
- Mantén nodos homogéneos: no añadas un nodo «pequeño» en un clúster de nodos «grandes».
- Monitoriza el propio clúster (discos, red) con una herramienta independiente o un segundo entorno (consulta monitorizar la salud de tu clúster).
Preguntas frecuentes
¿Sigue disponible el clúster mientras se añade un nodo?
Sí. La redistribución de los datos aumenta la carga de red y de disco de los nodos existentes, de ahí el interés de planificar la operación fuera de los picos de actividad.
¿Qué datos se pierden al retirar un nodo?
Los datos replicados se reconstruyen en los nodos restantes, pero las trazas del almacenamiento de transacciones local, generalmente sin replicar, se pierden. Comprueba antes que los nodos restantes tienen disco suficiente.
¿Cómo sustituir un servidor al final de su garantía?
Añade primero el nuevo nodo, espera a que esté operativo y retira después el antiguo. Con tres nodos, retirar un servidor antes de añadir otro haría perder la replicación completa.
Conclusión
Añadir o retirar un nodo Managed es una operación controlada siempre que se respeten unas pocas reglas: clúster sano, copia de seguridad reciente, servidor homogéneo, capacidad suficiente y paciencia durante la redistribución de los datos. La CMC hace la mayor parte del trabajo; tu papel es preparar el terreno y validar el resultado.
span.observer es un blog independiente de la comunidad, no afiliado a Dynatrace LLC. Dynatrace es una marca de Dynatrace LLC. Comprueba siempre los valores (puertos, versiones, tamaños) en la documentación oficial correspondiente a tu versión de Managed.