Kami telah menggunakan sistem file yang diatur secara hierarkis oleh: - luas geografis (negara atau benua) - penyedia data, pemberi lisensi - domain / dataset - tanggal / versi
Setelah itu kami memiliki kebijakan untuk memisahkan data sumber (dalam format yang sama dengan CD / DVD apa pun yang kami dapatkan dari penyedia) dari setiap set data turunan yang kami hasilkan di perusahaan kami.
Sistem file membuatnya sangat mudah untuk menelan data apa pun dari pelanggan dan juga memungkinkan fleksibilitas dalam hal penyimpanan fisik - kami menyimpan arsip kami pada disk yang lebih besar, lebih lambat dan kami memiliki server file khusus (secara transparan dihubungkan ke hierarki) untuk dataset lebih sering digunakan.
Untuk memfasilitasi manajemen dalam proyek, kami menggunakan tautan simbolis. Kami menyimpan vektor-vektor kami dalam database (Oracle) dan kami membuat aturan untuk memiliki setidaknya satu instance database per pelanggan (dan beberapa pengguna / skema untuk proyek-proyek). Kami belum menyimpan banyak raster dalam database, karena mereka cenderung mengambil terlalu banyak ruang bahkan di luar satu. Kami juga ingin membuat instance basis data kami seringan mungkin.
Dan ya, kami memiliki seseorang yang bertanggung jawab untuk 'menjaga' semuanya agar tidak berantakan.
Masalah terbesar yang kami miliki dengan pengaturan ini saat ini adalah tidak adanya antarmuka pengguna yang bagus yang akan membantu kami memiliki gambaran umum yang lebih baik tentang semuanya, dan kami telah merencanakan untuk menyertakan penyimpanan metadata di atas semua itu. Kami masih mempertimbangkan opsi kami di sini.
Kami menggunakan kontrol versi untuk kode kami dan kami telah menggunakannya untuk dokumen, tetapi ternyata kontrol versi tidak benar-benar dibuat untuk kumpulan data besar, terutama jika kebanyakan file biner, jadi saya tidak akan merekomendasikan itu , kecuali jika Anda berurusan dengan GML atau sesuatu yang mirip teks (masalah termasuk overhead besar pada penggunaan disk sisi server serta klien macet ketika memeriksa repositori besar).