PostgreSQL ERROR: tidak ada lagi koneksi yang diizinkan

19

Bagaimana Anda membebaskan koneksi PostgreSQL yang tidak ditutup dengan benar oleh aplikasi klien?

Saya memiliki aplikasi penambangan data yang memutar multi proses, semua koneksi ke database PostgreSQL 9.1 lokal untuk mengambil data. Ini berjalan dengan baik selama beberapa jam, tetapi kemudian mati dengan kesalahan:

FATAL:  remaining connection slots are reserved for non-replication superuser connections

Meneliti ini menunjukkan bahwa ini kemungkinan besar disebabkan oleh aplikasi tidak menutup koneksi dengan benar. Namun, bahkan dengan aplikasi terbunuh, koneksi ini tidak pernah dibebaskan. Apakah tidak ada semacam batas waktu di mana PostgreSQL akan secara otomatis menutup koneksi?

Saya juga mencoba meningkatkan max_connections Postgres dari 100 menjadi 200, tetapi memulai kembali memberi saya kesalahan:

2014-02-23 10:51:15 EST FATAL:  could not create shared memory segment: Invalid argument
2014-02-23 10:51:15 EST DETAIL:  Failed system call was shmget(key=5432001, size=36954112, 03600).
2014-02-23 10:51:15 EST HINT:  This error usually means that PostgreSQL's request for a shared memory segment exceeded your kernel's SHMMAX parameter.  You can either reduce the request size or reconfigure the kernel with larger SHMMAX.  To reduce the request size (currently 36954112 bytes), reduce PostgreSQL's shared memory usage, perhaps by reducing shared_buffers or max_connections.
    If the request size is already small, it's possible that it is less than your kernel's SHMMIN parameter, in which case raising the request size or reconfiguring SHMMIN is called for.
    The PostgreSQL documentation contains more information about shared memory configuration.

Sistem saya adalah Ubuntu 12.04 dan memiliki memori 8GB, dan semua pengaturan PG lainnya adalah default, jadi saya tidak yakin mengapa ia berpikir sistem tidak memiliki cukup memori.

Saya kemudian mencoba menggunakan pgbouncer untuk menyatukan dan menggunakan kembali koneksi. Ini tampaknya bekerja sedikit lebih baik, tetapi bahkan ini akhirnya kehabisan koneksi, memberi saya kesalahan:

ERROR:  no more connections allowed

Bagaimana cara saya mendiagnosis dan memperbaiki masalah ini lebih lanjut?

Cerin
sumber
Tampilkan output pg_stat_activity
ETL

Jawaban:

8

Anda dapat meningkatkan jumlah koneksi maksimal dengan mengubah pengaturan memori bersama maksimal Anda, namun jika masalahnya adalah koneksi Anda tidak ditutup, maka Anda harus benar-benar menyelesaikannya. Jika perangkat lunak di luar kendali Anda dan bermasalah dengan tidak menutup koneksi, Anda dapat menggunakan beberapa pekerjaan cron seperti:

select pg_terminate_backend(procpid)
from pg_stat_activity
where usename = 'yourusername'
 and current_query = '<IDLE>'
 and query_start < current_timestamp - interval '5 minutes'
;

Itulah yang saya lakukan untuk membunuh koneksi bocor dari perangkat lunak kereta yang serupa.

Atau, Anda mungkin dapat menjalankan perangkat lunak buggy Anda melalui kumpulan koneksi yang memiliki fungsi yang sama untuk membunuh koneksi menganggur seperti pgpool.

Catatan : Versi Postgres yang lebih baru memiliki nama kolom yang sedikit berbeda:

select pg_terminate_backend(pid)
from pg_stat_activity
where usename = 'YOURDATABASEUSERNAME*'
 and state = 'idle'
 and query_start < current_timestamp - interval '5 minutes'
;
ETL
sumber
Haruskah ini bekerja pada 9,6? Ketika saya mencoba saya dapatkanpostgres=> select pg_terminate_backend(procpid) from pg_stat_activity where current_query = '<IDLE>' and query_start < current_timestamp - interval '5 minutes'; ERROR: column "procpid" does not exist LINE 1: select pg_terminate_backend(procpid) from pg_stat_activity ...
Magick
Itu pidbukan procpiddi versi yang lebih baru.
ETL
4

Untuk versi PostgreSQL yang lebih baru:

select pg_terminate_backend(pid)
from pg_stat_activity
where usename = 'YOUR_DATABASE_USERNAME*'
 and state = 'idle'
 and query_start < current_timestamp - interval '5 minutes'
;

Di atas akan membantu Anda mengakhiri koneksi idle Anda. Saya memiliki masalah yang sama tetapi ternyata ada masalah dengan cara Flask dan SQLAlchemy saya untuk terhubung ke database.

* nama pengguna bukan kesalahan ketik

gogasca
sumber
0

Dokumen PG tentang pengelolaan sumber daya kernel. Ini akan membantu Anda meningkatkan batas memori di kernel.

Weda
sumber