Di bawah ini adalah solusi T-SQL yang menulis juta angka pertama ke tabel temp. Dibutuhkan sekitar 84 ms pada mesin saya. Kemacetan utama sedang menunggu pada kait NESTING_TRANSACTION_FULL dan CXPACKET
, keduanya saya tidak tahu bagaimana cara mengatasi selain mengubah MAXDOP
. Saya menginginkan rencana permintaan yang dapat memanfaatkan loop bersarang paralel dan paralelisme berbasis permintaan, yang berhasil saya dapatkan:
Kode ini agak panjang. Singkatnya, saya bergabung bersama dua tabel turunan dari 246 baris dan 271 baris dengan total 66666 baris. Baris-baris tersebut digabungkan ke tabel turunan 15 baris yang mengambil keuntungan dari fakta bahwa pola FIZZBUZZ diulang untuk setiap 15 baris. Sepuluh baris terakhir ditambahkan dengan a UNION ALL
.
DROP TABLE IF EXISTS #t;
SELECT res.fizzbuzz INTO #t
FROM
(
VALUES
(0),
(15),
(30),
(45),
(60),
(75),
(90),
(105),
(120),
(135),
(150),
(165),
(180),
(195),
(210),
(225),
(240),
(255),
(270),
(285),
(300),
(315),
(330),
(345),
(360),
(375),
(390),
(405),
(420),
(435),
(450),
(465),
(480),
(495),
(510),
(525),
(540),
(555),
(570),
(585),
(600),
(615),
(630),
(645),
(660),
(675),
(690),
(705),
(720),
(735),
(750),
(765),
(780),
(795),
(810),
(825),
(840),
(855),
(870),
(885),
(900),
(915),
(930),
(945),
(960),
(975),
(990),
(1005),
(1020),
(1035),
(1050),
(1065),
(1080),
(1095),
(1110),
(1125),
(1140),
(1155),
(1170),
(1185),
(1200),
(1215),
(1230),
(1245),
(1260),
(1275),
(1290),
(1305),
(1320),
(1335),
(1350),
(1365),
(1380),
(1395),
(1410),
(1425),
(1440),
(1455),
(1470),
(1485),
(1500),
(1515),
(1530),
(1545),
(1560),
(1575),
(1590),
(1605),
(1620),
(1635),
(1650),
(1665),
(1680),
(1695),
(1710),
(1725),
(1740),
(1755),
(1770),
(1785),
(1800),
(1815),
(1830),
(1845),
(1860),
(1875),
(1890),
(1905),
(1920),
(1935),
(1950),
(1965),
(1980),
(1995),
(2010),
(2025),
(2040),
(2055),
(2070),
(2085),
(2100),
(2115),
(2130),
(2145),
(2160),
(2175),
(2190),
(2205),
(2220),
(2235),
(2250),
(2265),
(2280),
(2295),
(2310),
(2325),
(2340),
(2355),
(2370),
(2385),
(2400),
(2415),
(2430),
(2445),
(2460),
(2475),
(2490),
(2505),
(2520),
(2535),
(2550),
(2565),
(2580),
(2595),
(2610),
(2625),
(2640),
(2655),
(2670),
(2685),
(2700),
(2715),
(2730),
(2745),
(2760),
(2775),
(2790),
(2805),
(2820),
(2835),
(2850),
(2865),
(2880),
(2895),
(2910),
(2925),
(2940),
(2955),
(2970),
(2985),
(3000),
(3015),
(3030),
(3045),
(3060),
(3075),
(3090),
(3105),
(3120),
(3135),
(3150),
(3165),
(3180),
(3195),
(3210),
(3225),
(3240),
(3255),
(3270),
(3285),
(3300),
(3315),
(3330),
(3345),
(3360),
(3375),
(3390),
(3405),
(3420),
(3435),
(3450),
(3465),
(3480),
(3495),
(3510),
(3525),
(3540),
(3555),
(3570),
(3585),
(3600),
(3615),
(3630),
(3645),
(3660),
(3675)
) v246 (n)
CROSS JOIN
(
VALUES
(0),
(15),
(30),
(45),
(60),
(75),
(90),
(105),
(120),
(135),
(150),
(165),
(180),
(195),
(210),
(225),
(240),
(255),
(270),
(285),
(300),
(315),
(330),
(345),
(360),
(375),
(390),
(405),
(420),
(435),
(450),
(465),
(480),
(495),
(510),
(525),
(540),
(555),
(570),
(585),
(600),
(615),
(630),
(645),
(660),
(675),
(690),
(705),
(720),
(735),
(750),
(765),
(780),
(795),
(810),
(825),
(840),
(855),
(870),
(885),
(900),
(915),
(930),
(945),
(960),
(975),
(990),
(1005),
(1020),
(1035),
(1050),
(1065),
(1080),
(1095),
(1110),
(1125),
(1140),
(1155),
(1170),
(1185),
(1200),
(1215),
(1230),
(1245),
(1260),
(1275),
(1290),
(1305),
(1320),
(1335),
(1350),
(1365),
(1380),
(1395),
(1410),
(1425),
(1440),
(1455),
(1470),
(1485),
(1500),
(1515),
(1530),
(1545),
(1560),
(1575),
(1590),
(1605),
(1620),
(1635),
(1650),
(1665),
(1680),
(1695),
(1710),
(1725),
(1740),
(1755),
(1770),
(1785),
(1800),
(1815),
(1830),
(1845),
(1860),
(1875),
(1890),
(1905),
(1920),
(1935),
(1950),
(1965),
(1980),
(1995),
(2010),
(2025),
(2040),
(2055),
(2070),
(2085),
(2100),
(2115),
(2130),
(2145),
(2160),
(2175),
(2190),
(2205),
(2220),
(2235),
(2250),
(2265),
(2280),
(2295),
(2310),
(2325),
(2340),
(2355),
(2370),
(2385),
(2400),
(2415),
(2430),
(2445),
(2460),
(2475),
(2490),
(2505),
(2520),
(2535),
(2550),
(2565),
(2580),
(2595),
(2610),
(2625),
(2640),
(2655),
(2670),
(2685),
(2700),
(2715),
(2730),
(2745),
(2760),
(2775),
(2790),
(2805),
(2820),
(2835),
(2850),
(2865),
(2880),
(2895),
(2910),
(2925),
(2940),
(2955),
(2970),
(2985),
(3000),
(3015),
(3030),
(3045),
(3060),
(3075),
(3090),
(3105),
(3120),
(3135),
(3150),
(3165),
(3180),
(3195),
(3210),
(3225),
(3240),
(3255),
(3270),
(3285),
(3300),
(3315),
(3330),
(3345),
(3360),
(3375),
(3390),
(3405),
(3420),
(3435),
(3450),
(3465),
(3480),
(3495),
(3510),
(3525),
(3540),
(3555),
(3570),
(3585),
(3600),
(3615),
(3630),
(3645),
(3660),
(3675),
(3690),
(3705),
(3720),
(3735),
(3750),
(3765),
(3780),
(3795),
(3810),
(3825),
(3840),
(3855),
(3870),
(3885),
(3900),
(3915),
(3930),
(3945),
(3960),
(3975),
(3990),
(4005),
(4020),
(4035),
(4050)
) v271 (n)
CROSS APPLY
(
VALUES
(CAST(v246.n * 271 + v271.n + 1 AS CHAR(8))),
(CAST(v246.n * 271 + v271.n + 2 AS CHAR(8))),
(CAST('FIZZ' AS CHAR(8))),
(CAST(v246.n * 271 + v271.n + 4 AS CHAR(8))),
(CAST('BUZZ' AS CHAR(8))),
(CAST('FIZZ' AS CHAR(8))),
(CAST(v246.n * 271 + v271.n + 7 AS CHAR(8))),
(CAST(v246.n * 271 + v271.n + 8 AS CHAR(8))),
(CAST('FIZZ' AS CHAR(8))),
(CAST('BUZZ' AS CHAR(8))),
(CAST(v246.n * 271 + v271.n + 11 AS CHAR(8))),
(CAST('FIZZ' AS CHAR(8))),
(CAST(v246.n * 271 + v271.n + 13 AS CHAR(8))),
(CAST(v246.n * 271 + v271.n + 14 AS CHAR(8))),
(CAST('FIZZBUZZ' AS CHAR(8)))
) res (fizzbuzz)
UNION ALL
SELECT v.fizzbuzz
FROM (
VALUES
('999991'),
('999992'),
('FIZZ'),
('999994'),
('BUZZ'),
('FIZZ'),
('999997'),
('999998'),
('FIZZ'),
('BUZZ')
) v (fizzbuzz)
OPTION (MAXDOP 6, NO_PERFORMANCE_SPOOL);
Menggunakan tabel SQL Server 2014 yang dioptimalkan memori dan prosedur yang disusun secara asli:
Prosedur asli:
Uji:
Hasil khas:
Ini menulis output prosedur ke variabel tabel dalam memori, karena jika tidak, kami hanya menguji kecepatan menampilkan hasil dalam SSMS.
Satu juta baris
Prosedur asli di atas membutuhkan waktu sekitar 12 detik untuk beroperasi pada 1.000.000 angka. Ada segala macam cara yang lebih cepat untuk melakukan hal yang sama di T-SQL. Yang saya tulis sebelumnya mengikuti. Ini berjalan di sekitar 500 ms di laptop saya pada satu juta baris ketika rencana paralel yang dimaksud tercapai:
sumber
Yang ini berjalan sama di komputer saya dengan yang pertama Anda (0ms). Saya tidak yakin apakah itu akan skala lebih cepat atau tidak.
sumber
Versi terbaik yang saya buat berjalan dalam 30 ms di komputer saya:
sumber
Menurut sqlfiddle.com ini membutuhkan waktu 7 ms:
Tidak menggunakan tabel, procs tersimpan, atau CTE apa pun.
sumber
Saya mendapatkan versi yang masuk akal dari proc tersimpan yang dikompilasi secara asli dan bekerja untuk 1 juta baris dalam ~ 500-800ms. Ini adalah konversi T-SQL yang saya lakukan pada algoritma bitwise dari sini dengan sedikit bantuan dari blog Adam Machanic tentang operasi bitwise di sini .
Saya (mudah-mudahan) mengikuti aturan yang sama dengan proc 500ms / 1 juta baris @ PaulWhite, yaitu menghasilkan hasil tetapi tidak menampilkannya / tidak meneruskannya sebagai bagian dari pengaturan waktu. Itu harus menjadi indeks hash pada tabel di dalam memori untuk kecepatan dan ukuran bucket 4.194.304 atau 8.388.608 tampaknya menjadi titik manis bagi saya, meskipun jelas yang memberikan jumlah ember kosong yang tinggi.
sumber
Saya menemukan dan bermain dengan sub pilih tunggal ini tanpa CTE. max_elapsed_time dalam statistik kueri menunjukkan 1036
sumber
Saya tidak mengambil kredit untuk kode yang ditulis, saya hanya ingin melihat berapa lama waktu yang diperlukan
SATU MILIAR BARIS!
Jawabannya adalah: sekitar 10 menit.
sumber
PostgreSQL
PostgreSQL menyediakan
generate_series
, Tabel-Nilai Fungsi (Set-Returning Function) yang membuat ini lebih sederhana. Saya berasumsi Anda tidak ingin output apa pun ketika nomor tidak 3, atau 5 masuk ke dalamnya.sumber