Apa opsi kompresi untuk menyimpan teks dalam jumlah besar di Postgres?

Saya perlu menyimpan teks dalam jumlah besar di Postgres, terutama log perintah dan output dari perintah yang sudah berjalan lama dan perlu tahu apakah ada beberapa pengaturan yang dapat membantu mengompres data secara transparan dengan alat seperti zlib, atau beberapa metode menghemat ruang asli lainnya .

Data utamanya hanya baca data, jadi menulis bukan masalah.

postgresql compression

— vfclists
sumber

dari manual : " String panjang dikompresi oleh sistem secara otomatis " dan di sini adalah deskripsi yang lebih terperinci: postgresql.org/docs/current/static/storage-toast.html

— a_horse_with_no_name

Kami menggunakan algoritma kompresi rasio yang sangat rendah, karena harus memiliki biaya CPU yang rendah. Jadi masih layak dilakukan bentuk lain dari kompresion dan pengaturan EXTERNALpenyimpanan pada kolom.

— Craig Ringer

@CraigRinger Ketika Anda mengatakan bentuk kompresi lain, maksud Anda mengatur beberapa opsi Postgres tambahan, atau mengkompilasi beberapa modul tambahan, apakah perpustakaan yang sudah jadi atau milik Anda sendiri?

— vfclists

Secara default Postgres secara otomatis mengompresi semua TEXT. Ini menggunakan algorythm lzcompress sederhana:

https://www.postgresql.org/docs/9.3/storage-toast.html

Ada sebuah plugin yang mungkin akan berevolusi menjadi dukungan kompresi LZ4 untuk TEXT:

https://github.com/zilder/pg_lz4

Ada PLRT Asing yang juga mendukung kompresi:

https://www.citusdata.com/blog/2014/04/03/columnar-store-for-analytics/

— kworr
sumber