Apa praktik terbaik untuk menyimpan hasil paginasi yang urutan / propertinya dapat berubah?

Apa praktik terbaik untuk melakukan caching hasil pencarian paginasi yang pemesanan / propertinya dapat diubah?

Katakanlah, dalam aplikasi saya, seseorang ingin melihat 20 utas diskusi terakhir (dari 10.000). Permintaan akan dikirim ke database, melalui servlet, untuk mengambil 20 catatan pertama dari tabel utas diskusi sebagai XML / JSON. Jika kemudian mereka ingin melihat 20 berikutnya, mereka pergi ke halaman hasil berikutnya dan ini memicu permintaan lain untuk mendapatkan lot berikutnya (batas dan offset = 20, dll.).

Untuk mengurangi beban server dan menunggu klien, saya ingin membuat cache halaman hasil sebelumnya. Namun, saya punya dua pertanyaan:

1. Tabel hasil yang ditunjukkan dapat dipesan oleh lebih dari satu atribut (yaitu, tanggal pembuatan utas, penulis utas, terakhir-pasca-tanggal). Ini berarti bahwa pernyataan seperti '20 hasil pertama' tidak masuk akal tanpa konteks (yaitu, dengan apa kita memesan). Bagaimana front-end berkomunikasi dengan back-end apa yang sudah dimuat? Pikiran pertama saya adalah menggunakan ID untuk setiap hasil tetapi mengirimkan ini kembali ke server pada permintaan berikutnya (dan memfilter hasil berdasarkan pada mereka) akan sama menyita waktu dengan mengirim semuanya kembali secara membabi buta. Bagaimana saya bisa melakukan ini?
2. Bagaimana jika suatu atribut dari hasil yang sebelumnya dikembalikan (yaitu, paling baru-baru-pasca-tanggal) telah berubah? Kami kemudian perlu cara memeriksa setiap hasil untuk melihat apakah sudah dimodifikasi di sisi server sejak di-paging. Bagaimana saya bisa melakukan ini?

Tampaknya apa yang Anda butuhkan adalah pembungkus untuk semua parameter yang mendefinisikan sebuah halaman (misalnya, pageNumber, pageSize, sortType, totalCount, dll) dan menggunakan ini DataRequestobjek sebagai kunci untuk mekanisme caching Anda. Dari titik ini Anda memiliki sejumlah opsi untuk menangani cache:

• Terapkan semacam mekanisme batas waktu untuk menyegarkan kembali cache (berdasarkan seberapa sering data berubah).
• Minta pendengar yang memeriksa perubahan basis data dan memperbarui cache berdasarkan parameter di atas.
• Jika perubahan dilakukan dengan proses yang sama, Anda selalu dapat menandai cache sebagai usang dengan setiap perubahan dan memeriksa bendera ini ketika halaman diminta.

Dua yang pertama mungkin melibatkan mekanisme penjadwal untuk memicu pada beberapa interval atau berdasarkan suatu peristiwa. Yang terakhir mungkin lebih sederhana jika Anda memiliki satu jalur akses data.

Terakhir, seperti yang disebutkan oleh @DanPichelman, ini dapat dengan cepat menjadi algoritma yang terlalu rumit yang melebihi manfaatnya, jadi pastikan keuntungan dalam kinerja membenarkan kompleksitas algoritma.

Saya mungkin akan menanganinya seperti ini:

1. Perlakukan urutan berbeda sebagai urutan berbeda secara bersamaan. Tidak ada gunanya pembukuan tambahan untuk melacak apa yang dimiliki masing-masing klien (atau mengirimkannya berulang-ulang).
2. Setiap kali halaman pengguna, segera ditampilkan dari cache sementara pada saat yang sama mengirim GET ke server yang menyertakan hash atau waktu akses terakhir. Server hanya mengirim kembali satu halaman penuh jika ada sesuatu yang berubah.
3. Ambil dari server lebih dari satu halaman UI sekaligus. Misalnya, jika UI Anda menampilkan 20 entri, kueri 60. Saya perlu menguji yang ini, tetapi harapan saya adalah bahwa ukuran pengembalian paling efisien biasanya akan lebih besar daripada jumlah rata-rata data yang ditampilkan pada satu halaman. Ini juga membuat UI sangat responsif untuk beberapa pergantian halaman.
4. Prefetch reslts saat Anda mendekati batas. Ini membantu menghemat waktu muat yang cepat dari cache.

Hanya pemikiran - dalam panggilan server Anda, berikan parameter biasa ditambah array hash MD5 yang mewakili halaman data yang sebelumnya dilihat dalam cache yang di-cache.

Panggilan balik akan berisi semua data yang biasa untuk halaman saat ini yang baru, ditambah pembaruan untuk halaman yang sudah lama dilihat sebelumnya. Anda dapat menggunakan hash lama sebagai kuncinya.

Saya akan merekomendasikan banyak tes kinerja & waktu pertama - kode sisi klien Anda akan menjadi jauh lebih rumit daripada jika Anda menekan server untuk setiap halaman data. Pastikan kompleksitas ekstra menghasilkan peningkatan yang berarti.