Fortaleciendo la infraestructura de preview en Breniapp/brenia: Automatización y vigilancia
En Breniapp/brenia, hemos enfrentado retos operativos relacionados con la estabilidad de nuestros entornos de previsualización. Tras incidentes recientes donde los trabajadores de cola dejaron de procesar tareas silenciosamente, decidimos implementar una estrategia de vigilancia proactiva y sincronización de entorno para mejorar la operabilidad.
Vigilancia con Watchdog
Hemos introducido watchdog.sh, un script diseñado para ejecutarse mediante cron cada cinco minutos. Este componente monitorea la salud de los trabajadores de cola de Redis, la acumulación de trabajos fallidos y el uso de recursos del servidor (RAM, disco y carga de CPU). Si se detecta una anomalía, el sistema envía una alerta a través de webhooks para permitir una respuesta rápida.
#!/bin/bash
# Ejemplo conceptual del watchdog de colas
if [ "$(redis-cli LLEN queue:content-generation)" -gt 100 ]; then
echo "Alerta: Cola de generación bloqueada"
curl -X POST -H "Content-Type: application/json" $WEBHOOK_URL
fi
Sincronización de entorno
Para resolver la gestión manual de variables, desarrollamos env-sync.sh. Esta herramienta permite aplicar cambios de configuración de forma consistente a todo el fleet de servidores. El script implementa un patrón de "upsert" (actualizar o insertar) que asegura que nuestras variables, como aquellas necesarias para integraciones con Stripe, se mantengan sincronizadas sin sobreescribir configuraciones críticas del sistema.
#!/bin/bash
# Ejemplo de sincronización de variables de entorno
function sync_env() {
local host=$1
local var_key=$2
local var_val=$3
ssh $host "sed -i '/$var_key=/d' .env && echo '$var_key=$var_val' >> .env"
ssh $host "php artisan config:cache && php artisan queue:restart"
}
Estas herramientas no solo reducen el tiempo de respuesta ante fallos, sino que también eliminan la deriva de configuración entre entornos, garantizando que cada sitio de previsualización se comporte según lo esperado.
Generated with Gitvlg.com