¿Cómo se liberan las conexiones PostgreSQL que las aplicaciones cliente no cierran correctamente?
Tengo una aplicación de minería de datos que hace girar múltiples procesos, toda la conexión a una base de datos local de PostgreSQL 9.1 para recuperar datos. Funciona bien durante unas horas, pero luego muere con el error:
FATAL: remaining connection slots are reserved for non-replication superuser connections
Investigar esto muestra que esto probablemente se deba a que la aplicación no cierra correctamente sus conexiones. Sin embargo, incluso con la aplicación eliminada, estas conexiones nunca se liberan. ¿No hay algún tipo de tiempo de espera en el que PostgreSQL cerrará automáticamente una conexión?
También intenté aumentar las conexiones max_ de Postgres de 100 a 200, pero reiniciar me dio el error:
2014-02-23 10:51:15 EST FATAL: could not create shared memory segment: Invalid argument
2014-02-23 10:51:15 EST DETAIL: Failed system call was shmget(key=5432001, size=36954112, 03600).
2014-02-23 10:51:15 EST HINT: This error usually means that PostgreSQL's request for a shared memory segment exceeded your kernel's SHMMAX parameter. You can either reduce the request size or reconfigure the kernel with larger SHMMAX. To reduce the request size (currently 36954112 bytes), reduce PostgreSQL's shared memory usage, perhaps by reducing shared_buffers or max_connections.
If the request size is already small, it's possible that it is less than your kernel's SHMMIN parameter, in which case raising the request size or reconfiguring SHMMIN is called for.
The PostgreSQL documentation contains more information about shared memory configuration.
Mi sistema es Ubuntu 12.04 y tiene 8 GB de memoria, y todas las demás configuraciones de PG son predeterminadas, por lo que no estoy seguro de por qué cree que el sistema no tiene suficiente memoria.
Luego intenté usar pgbouncer para agrupar y reutilizar las conexiones. Esto pareció funcionar un poco mejor, pero incluso esto finalmente se quedó sin conexiones, dándome el error:
ERROR: no more connections allowed
¿Cómo diagnostico y soluciono este problema?
fuente
Respuestas:
Puede aumentar el número máximo de conexiones cambiando la configuración máxima de memoria compartida, sin embargo, si el problema es que sus conexiones no se están cerrando, entonces realmente debería resolverlo. Si el software está fuera de su control y tiene errores al no cerrar las conexiones, puede usar algún trabajo cron como:
Eso es lo que hago para eliminar las conexiones con fugas de un software con errores similar.
Alternativamente, puede ejecutar su software con errores a través de un grupo de conexiones que tiene una funcionalidad similar para eliminar conexiones inactivas como pgpool.
Nota : Las versiones más recientes de Postgres tienen nombres de columna ligeramente diferentes:
fuente
postgres=> select pg_terminate_backend(procpid) from pg_stat_activity where current_query = '<IDLE>' and query_start < current_timestamp - interval '5 minutes'; ERROR: column "procpid" does not exist LINE 1: select pg_terminate_backend(procpid) from pg_stat_activity ...
pid
lugar deprocpid
en versiones más nuevas.Para versiones más recientes de PostgreSQL:
Lo anterior lo ayudará a terminar sus conexiones inactivas. Tuve el mismo problema, pero resultó ser un problema con mi forma de Flask y SQLAlchemy para conectarme a la base de datos.
* usename no es un error tipográfico
fuente
Documento PG sobre la gestión de recursos del kernel. Esto debería ayudarlo a aumentar el límite de memoria en el núcleo.
fuente