Pertanyaan yang diberi tag «bulk»

Menggunakan PG 9.1 di Ubuntu 12.04. Saat ini diperlukan waktu hingga 24 jam bagi kami untuk menjalankan serangkaian besar pernyataan UPDATE pada database, yang berbentuk: UPDATE table SET field1 = constant1, field2 = constant2, ... WHERE id = constid (Kami hanya menimpa bidang objek yang diidentifikasi oleh ID.) Nilai-nilai tersebut …

37 postgresql  performance  update  bulk 

Saya bertanya-tanya apa cara paling efisien untuk menghapus sejumlah besar baris dari PostgreSQL, proses ini akan menjadi bagian dari tugas berulang setiap hari untuk mengimpor data massal (delta penyisipan + penghapusan) ke dalam tabel. Mungkin ada ribuan, berpotensi jutaan baris untuk dihapus. Saya punya file kunci utama, satu per baris. …

23 postgresql  delete  bulk 

Saya telah membaca sebuah artikel yang menyebutkan bahwa kita dapat mencapai 60.000 sisipan per detik dengan menggunakan LOAD DATA IN FILEpernyataan, yang membaca dari file csv dan memasukkan data ke dalam basis data. Mengapa harus berbeda dari sisipan normal? EDIT: Saya mengurangi perjalanan pulang-pergi dengan menelepon satu INSERTpernyataan: INSERT INTO …

22 mysql  import  bulk 

Untuk meringkas spesifikasinya: Kita perlu memasukkan sekitar 5 juta baris ke dalam database vendor (Oracle). Semuanya berjalan baik untuk kumpulan 500k baris menggunakan OracleBulkCopy(ODP.NET), tetapi ketika kami mencoba untuk skala hingga 5M, kinerja mulai melambat ke perayapan setelah menyentuh tanda 1M, semakin lambat karena semakin banyak baris dimuat, dan akhirnya …

14 oracle  bulk 

Saya sedang mencari cara untuk menghasilkan tabel MySQL baru hanya berdasarkan pada isi CSV yang ditentukan. File CSV yang akan saya gunakan memiliki properti berikut; "|" dibatasi Baris pertama menentukan nama kolom (header), juga "|" dibatasi Nama kolom & pesanan tidak diperbaiki. Jumlah kolom tidak tetap. File berukuran besar (1 …

12 mysql  csv  import  bulk 

Saya perlu mengimpor sekitar 500.000 catatan yang berisi data pencarian IP (baca-saja referensi) sekitar seminggu sekali (hanya tiga int / bigint cols). Saya tidak benar-benar ingin khawatir tentang penggabungan data dengan tabel yang ada, saya lebih suka membersihkan yang lama dan mengimpor kembali. Idealnya kueri yang melebihi data akan terus …

11 sql-server  import  bulk 

Kami sedang mengerjakan proyek yang membutuhkan data impor dari lembar kerja Excel setiap hari. Data akan diimpor dari templat yang ditentukan sebelumnya dan apa yang kami pikirkan, pertama kami akan mengunggah data dalam tabel sementara dan melakukan operasi pembersihan (menghapus informasi yang tidak perlu, menambahkan baris baru di tabel induk …

8 sql-server  bulk  import