Postgres Queues Escalan de Verdad
Se ha demostrado que las colas de Postgres pueden escalar de verdad. Aunque se cree que no pueden manejar grandes cargas de trabajo, con las optimizaciones adecuadas, Postgres puede manejar miles de ejecuciones de flujos de trabajo por segundo.
Una de las principales limitaciones de las colas de Postgres es la contención entre los trabajadores que intentan dequeuear los mismos flujos de trabajo. Para solucionar este problema, se puede utilizar la cláusula `FOR UPDATE SKIP LOCKED`, que permite a los trabajadores seleccionar los flujos de trabajo más antiguos que no estén bloqueados por otros trabajadores. De esta manera, se reduce la contención y se mejora el rendimiento.
“Además, es importante tener en cuenta que los índices no son gratuitos”
Otro obstáculo que se puede encontrar es el nivel de aislamiento de transacciones. El nivel de aislamiento `REPEATABLE READ` puede ser demasiado costoso en términos de rendimiento cuando se manejan miles de flujos de trabajo por segundo. Sin embargo, se puede utilizar el nivel de aislamiento `READ COMMITTED` para las colas que no requieren control de flujo global, lo que elimina las fallas de serialización y mejora el rendimiento.
Además, es importante tener en cuenta que los índices no son gratuitos. Aunque pueden mejorar el rendimiento en algunos casos, también pueden generar sobrecarga en la base de datos. Por lo tanto, es fundamental seleccionar los índices adecuados y utilizarlos de manera efectiva para evitar la sobrecarga y mejorar el rendimiento general de la base de datos.
En resumen, las colas de Postgres pueden escalar de verdad si se utilizan las optimizaciones adecuadas, como la cláusula `FOR UPDATE SKIP LOCKED`, el nivel de aislamiento `READ COMMITTED` y la selección efectiva de índices. Con estas optimizaciones, se puede lograr un rendimiento de miles de ejecuciones de flujos de trabajo por segundo, incluso con miles de trabajadores.
