Home Projects Portfolio Dashboard Export PDF Log in
Shell Redis Stripe

Fortaleciendo la infraestructura de preview en Breniapp/brenia: Automatización y vigilancia

En Breniapp/brenia, hemos enfrentado retos operativos relacionados con la estabilidad de nuestros entornos de previsualización. Tras incidentes recientes donde los trabajadores de cola dejaron de procesar tareas silenciosamente, decidimos implementar una estrategia de vigilancia proactiva y sincronización de entorno para mejorar la operabilidad.

Vigilancia con Watchdog

Hemos introducido watchdog.sh, un script diseñado para ejecutarse mediante cron cada cinco minutos. Este componente monitorea la salud de los trabajadores de cola de Redis, la acumulación de trabajos fallidos y el uso de recursos del servidor (RAM, disco y carga de CPU). Si se detecta una anomalía, el sistema envía una alerta a través de webhooks para permitir una respuesta rápida.

#!/bin/bash
# Ejemplo conceptual del watchdog de colas
if [ "$(redis-cli LLEN queue:content-generation)" -gt 100 ]; then
  echo "Alerta: Cola de generación bloqueada"
  curl -X POST -H "Content-Type: application/json" $WEBHOOK_URL
fi

Sincronización de entorno

Para resolver la gestión manual de variables, desarrollamos env-sync.sh. Esta herramienta permite aplicar cambios de configuración de forma consistente a todo el fleet de servidores. El script implementa un patrón de "upsert" (actualizar o insertar) que asegura que nuestras variables, como aquellas necesarias para integraciones con Stripe, se mantengan sincronizadas sin sobreescribir configuraciones críticas del sistema.

#!/bin/bash
# Ejemplo de sincronización de variables de entorno
function sync_env() {
  local host=$1
  local var_key=$2
  local var_val=$3
  ssh $host "sed -i '/$var_key=/d' .env && echo '$var_key=$var_val' >> .env"
  ssh $host "php artisan config:cache && php artisan queue:restart"
}

Estas herramientas no solo reducen el tiempo de respuesta ante fallos, sino que también eliminan la deriva de configuración entre entornos, garantizando que cada sitio de previsualización se comporte según lo esperado.


Generated with Gitvlg.com

Fortaleciendo la infraestructura de preview en Breniapp/brenia: Automatización y vigilancia
Gerardo Ruiz

Gerardo Ruiz

Author

Share: