Engineer / Datos / Portafolio
Trabajo lento trasladado a una cola River
Saqué las tareas lentas del procesamiento de solicitudes y las trasladé a una cola River — 15 módulos de trabajadores, 8 tareas programadas y 20 tareas pg_cron — para responder a las solicitudes mientras el trabajo continúa en segundo plano.
2025
Situación. Hay trabajos que no deberían realizarse mientras un usuario espera. Enviar correo, reconstruir un índice de búsqueda, generar un documento o recalcular clasificaciones dentro de la solicitud obliga al usuario a mirar un indicador de carga por algo que no ha pedido ver. Ejecutarlo en una goroutine, en cambio, hace que desaparezca cuando se reinicie el proceso, algo que sucederá durante un despliegue, sin conservar siquiera un registro de que debía realizarse.
Tarea. El trabajo en segundo plano necesitaba un lugar duradero: una cola que sobreviviera a un reinicio, reintentara un fallo y pudiera inspeccionarse cuando algo no hubiera ocurrido.
Acción. Se eligió River, principalmente porque conserva la cola en PostgreSQL. La base de datos ya es el registro de referencia del sistema, por lo que una tarea y las filas que modifica pueden confirmarse o revertirse juntas, sin una segunda infraestructura que operar y comprender. Hay 15 módulos de trabajadores y 8 tareas programadas. Por debajo, 20 trabajos pg_cron realizan el mantenimiento que la base de datos está mejor situada para ejecutar: depurar particiones, rotar sales y actualizar agregados. Todo trabajo lo bastante lento para notarse se trasladó fuera del recorrido de la solicitud a uno de estos dos mecanismos.
Resultado. Las solicitudes responden rápido y el trabajo lento sigue terminándose, con reintentos e historial visible cuando no lo consigue. Mantener la cola en Postgres en lugar de un intermediario dedicado es un límite deliberado: no escalará indefinidamente y, a cierto volumen, dejará de ser la respuesta adecuada. Para una plataforma cuyo cuello de botella ya es la base de datos, una pieza menos valía más que una capacidad de crecimiento que no se iba a utilizar.