Pertanyaan yang diberi tag «data-warehouse»

Topologi dominan pemodelan Data Warehouse (Star, Snowflake) dirancang dengan hubungan satu ke banyak. Keterbacaan permintaan, kinerja, dan struktur sangat menurun ketika dihadapkan dengan hubungan banyak ke banyak dalam skema pemodelan ini. Apa sajakah cara untuk menerapkan hubungan banyak-ke-banyak antara dimensi atau antara tabel fakta dan dimensi dalam gudang data dan …

25 database-design  data-warehouse 

Saya menyadari bahwa perusahaan saya menggunakan proses ELT (extract-load-transform) alih-alih menggunakan proses ETL (extract-transform-load). Apa perbedaan dalam dua pendekatan dan di mana situasi yang satu akan "lebih baik" dari yang lain? Akan lebih bagus jika Anda bisa memberikan beberapa contoh.

19 data-warehouse  etl  business-intelligence 

Saya kinerja menyetel gudang data menggunakan indeks. Saya cukup baru untuk SQL Server 2014.Microsoft menjelaskan hal berikut: "Kami melihat indeks columnstore berkerumun sebagai standar untuk menyimpan tabel fakta pergudangan data besar, dan berharap itu akan digunakan dalam sebagian besar skenario penyimpanan data. Karena indeks columnstore berkerumun dapat diperbarui, beban kerja …

18 sql-server  foreign-key  data-warehouse  sql-server-2014  columnstore 

Saat menggunakan tabel temporal versi sistem (baru di SQL Server 2016), apa yang dimaksud dengan authoring query dan implikasi kinerja ketika fitur ini digunakan untuk menangani Dimensi Perlahan-lahan Mengubah dalam gudang data relasional yang besar? Misalnya, anggap saya memiliki Customerdimensi 100.000 baris dengan Postal Codekolom dan Salestabel fakta multi-miliar baris …

17 sql-server  data-warehouse  slowly-changing-dimension  sql-server-2016  temporal-tables 

Tutup. Pertanyaan ini di luar topik . Saat ini tidak menerima jawaban. Ingin meningkatkan pertanyaan ini? Perbarui pertanyaan agar sesuai dengan topik untuk Administrator Stack Exchange. Ditutup 4 tahun yang lalu . Saya ingin tahu bahwa pertanyaan ini belum ditanyakan. Google hanya memiliki sedikit hasil bagi saya yang tidak menunjukkan …

16 tools  data-warehouse  database-agnostic  business-intelligence 

Saya sesekali mengunduh set data yang tersedia untuk umum dalam bentuk Postgres dBs. Kumpulan data ini diperbarui / dimodifikasi / diperluas dari waktu ke waktu oleh host repositori. Apakah ada perintah atau alat Postgres (idealnya FOSS) yang dapat menunjukkan perbedaan antara database OLD dan BARU Postgres? (Asumsi yang berfungsi adalah …

14 postgresql  data-warehouse 

Saya perlu mendukung bidang dan nilai dinamis di pusat data besar untuk menyimpan log permintaan API, kasus pengguna saya adalah bahwa saya perlu menyimpan semua string permintaan API dan dapat melakukan kueri terhadap mereka di masa mendatang (jadi bukan hanya penyimpanan, jadi saya tidak bisa menggunakan gumpalan untuk mereka) misalnya …

13 database-design  data-warehouse  eav  star-schema  redshift 

Berdasarkan analisis saya, model dimensi lengkap untuk gudang data kami akan membutuhkan ekstraksi dari lebih dari 200 tabel sumber. Beberapa tabel ini akan diekstraksi sebagai bagian dari beban tambahan dan lainnya akan menjadi beban penuh. Untuk diketahui, kami memiliki sekitar 225 sumber basis data dengan skema yang sama. Dari apa …

12 sql-server  sql-server-2005  ssis  data-warehouse  etl 

Saya memiliki gudang data 200 GB di SQL Server. Saya telah mengalami waktu eksekusi yang sangat lambat untuk beberapa permintaan; misalnya 12 jam untuk deletekueri sederhana dengan inner join. Setelah melakukan riset dengan rencana eksekusi, saya memperbarui statistik dari 2 tabel yang terlibat dalam kueri, menggunakan WITH FULLSCANopsi. Permintaan sekarang …

12 sql-server  data-warehouse  statistics 

Kami mulai merancang blok bangunan data mart / gudang dan kami harus dapat mendukung semua zona waktu (klien kami berasal dari seluruh dunia). Dari membaca diskusi online (dan dalam buku), solusi umum tampaknya memiliki dimensi tanggal dan waktu yang terpisah serta cap waktu di tabel fakta. Namun, pertanyaan saya mengalami …

12 sql-server-2012  data-warehouse  datetime  timezone 

Beberapa literatur tentang kompresi data SQL Server yang saya baca menyatakan bahwa biaya penulisan meningkat menjadi sekitar empat kali lipat dari yang biasanya diperlukan. Tampaknya juga menyiratkan bahwa ini adalah kelemahan utama untuk kompresi data, sangat menyiratkan bahwa untuk database arsip read-only, kinerja akan (dengan beberapa pengecualian) ditingkatkan dengan penggunaan …

11 sql-server  sql-server-2012  data-warehouse  compression 

Saya cukup baru untuk PostgreSQL, saya belum pernah melakukan penyebaran besar menggunakannya sebelumnya. Tetapi, saya memiliki pengalaman yang baik dalam solusi perusahaan dan saya ingin mencoba dan menerapkan beberapa dari apa yang saya pelajari menggunakan PostgreSQL. Saya memiliki situs yang berukuran untuk menangani sejumlah besar data dan lalu lintas. Infrastruktur …

11 postgresql  data-warehouse  etl 

Pada Oracle Exadata (11gR2), kami memiliki basis data yang relatif gemuk. cpu_count adalah 24 parallel_server_inances adalah 2 parallel_threads_per_cpu adalah 2 Kami mencatat, melalui pengamatan di Oracle Enterprise Manager (OEM), bahwa kinerja sangat buruk karena permintaan dieksekusi secara serial. Untuk mengatasi ini, semua tabel, pandangan terwujud dan indeks diubah untuk mengambil …

11 oracle  data-warehouse 

Kami mencoba untuk mengoptimalkan desain data warehouse yang akan mendukung pelaporan terhadap data untuk banyak zona waktu. Misalnya, kami mungkin memiliki laporan untuk aktivitas selama satu bulan (jutaan baris) yang perlu menunjukkan aktivitas yang dikelompokkan berdasarkan jam dalam sehari. Dan tentu saja jam itu harus menjadi jam "lokal" untuk zona …

10 sql-server  database-design  data-warehouse  reporting  timezone 

Saya sedang mengerjakan perhitungan 'belakang amplop' untuk pengaturan basis data pelaporan 100TB. Saya mencari pemikiran dari para ahli di sini. Lingkungan yang diusulkan: Kapasitas Penyimpanan ~ 100TB Tabel ~ 200, ukuran mulai dari 1GB hingga 5TB. ukuran rata-rata bisa berada di antara 100GB-200GB ETL - pekerjaan mungkin memerlukan gabungan antara …

10 oracle  database-recommendation  data-warehouse