Menggunakan PG 9.1 di Ubuntu 12.04. Saat ini diperlukan waktu hingga 24 jam bagi kami untuk menjalankan serangkaian besar pernyataan UPDATE pada database, yang berbentuk: UPDATE table SET field1 = constant1, field2 = constant2, ... WHERE id = constid (Kami hanya menimpa bidang objek yang...
Saya bertanya-tanya apa cara paling efisien untuk menghapus sejumlah besar baris dari PostgreSQL, proses ini akan menjadi bagian dari tugas berulang setiap hari untuk mengimpor data massal (delta penyisipan + penghapusan) ke dalam tabel. Mungkin ada ribuan, berpotensi jutaan baris untuk...
Saya telah membaca sebuah artikel yang menyebutkan bahwa kita dapat mencapai 60.000 sisipan per detik dengan menggunakan LOAD DATA IN FILEpernyataan, yang membaca dari file csv dan memasukkan data ke dalam basis data. Mengapa harus berbeda dari sisipan normal? EDIT: Saya mengurangi perjalanan...
Untuk meringkas spesifikasinya: Kita perlu memasukkan sekitar 5 juta baris ke dalam database vendor (Oracle). Semuanya berjalan baik untuk kumpulan 500k baris menggunakan OracleBulkCopy(ODP.NET), tetapi ketika kami mencoba untuk skala hingga 5M, kinerja mulai melambat ke perayapan setelah menyentuh...
Saya sedang mencari cara untuk menghasilkan tabel MySQL baru hanya berdasarkan pada isi CSV yang ditentukan. File CSV yang akan saya gunakan memiliki properti berikut; "|" dibatasi Baris pertama menentukan nama kolom (header), juga "|" dibatasi Nama kolom & pesanan tidak diperbaiki. Jumlah...
Saya perlu mengimpor sekitar 500.000 catatan yang berisi data pencarian IP (baca-saja referensi) sekitar seminggu sekali (hanya tiga int / bigint cols). Saya tidak benar-benar ingin khawatir tentang penggabungan data dengan tabel yang ada, saya lebih suka membersihkan yang lama dan mengimpor...
Kami sedang mengerjakan proyek yang membutuhkan data impor dari lembar kerja Excel setiap hari. Data akan diimpor dari templat yang ditentukan sebelumnya dan apa yang kami pikirkan, pertama kami akan mengunggah data dalam tabel sementara dan melakukan operasi pembersihan (menghapus informasi yang...