InnoDB membuat kesalahan tabel: "Ukuran baris terlalu besar"

11

Kami memiliki beberapa insinyur yang meratakan struktur db yang dinormalisasi menjadi tabel sementara untuk keperluan menghasilkan laporan. Kolom ditentukan sebagai TEXT NOT NULL(Saya tahu "mengapa mereka melakukan itu?"; Mari kita asumsikan bahwa kita sedang menangani ini).

Kami menggunakan MySQL 5.1.48 Community RHEL5 dengan plug-in InnoDB 1.0.9 di Linux.

Saat menggunakan MyISAM, kami tidak pernah menemukan batas ukuran tabel kolom maks atau panjang baris maks (selama penyelidikan kami telah mencapai batas kolom maks di 2598 (yang ke-2599 menyebabkan kesalahan 1117). Dengan InnoDB kami mencapai batas. Batas ini memanifestasikan saat membuat tabel (tidak ada penyisipan data) sebagai:

GALAT 1118 (42000) pada baris 1: Ukuran baris terlalu besar. Ukuran baris maksimum untuk tipe tabel yang digunakan, tidak termasuk BLOB, adalah 8126. Anda harus mengubah beberapa kolom menjadi TEXT atau BLOB

Saya mencari jawaban untuk yang berikut:

  1. Apa rumus terperinci untuk menentukan ukuran baris khususnya ketika menggunakan lot's dari kolom v / v / b / t? Saya sudah mencoba beberapa formual berbeda menggunakan varchar(N)kolom (di mana N adalah antara 1 dan 512), charset UTF8 (* 3), dan kolom sebanyak tabel akan mengambil sampai kegagalan. Tidak ada satu pun dari kombo yang saya coba berikan nilai yang cocok dengan hasil tes yang sebenarnya.

  2. Apa 'overhead' lain yang harus saya pertimbangkan ketika menghitung ukuran baris?

  3. Mengapa pesan kesalahan berubah dari 8126 ke 65535 ketika saya beralih dari membuat tabel dengan kolom varchar (109) ke kolom varchar (110)?

mysql innodb
sumber
Saya memiliki masalah yang sama. Ketika saya sedang memeriksa database saya menemukan salah satu add-on ke browser web sedang memasukkan kode html ke kode sumber halaman (bahkan ke form) dan ini menyebabkan masalah.
HTML bukan penjahatnya. Atau ukuran HTML itu. Anda harus memiliki banyak teks / kolom varchar dan telah mencapai beberapa batasan yang dapat dikerjakan.
Rick James

Jawaban:

19

Jawaban untuk pertanyaan Anda rumit, karena mereka berbeda berdasarkan format file InnoDB . Saat ini, ada dua format, yang disebut Antelope dan Barracuda.

File tablespace pusat (ibdata1) selalu dalam format Antelope . Jika Anda menggunakan file per tabel, Anda dapat membuat file individual menggunakan format Barracuda dengan mengatur innodb_file_format=Barracudadi my.cnf.

Poin dasar:

  • Satu halaman 16KB data InnoDB harus menampung setidaknya dua baris data. Plus setiap halaman memiliki header dan footer yang berisi checksum halaman dan nomor urut log dan sebagainya. Di situlah Anda mendapatkan batas Anda sedikit kurang dari 8KB per baris.

  • Tipe data ukuran tetap seperti INTEGER, DATE, FLOAT, CHAR disimpan pada halaman data primer ini dan dihitung menuju batas ukuran baris.

  • Tipe data berukuran variabel seperti VARCHAR, TEXT, BLOB disimpan pada halaman meluap, sehingga mereka tidak menghitung sepenuhnya menuju batas ukuran baris. Di Antelope, hingga 768 byte kolom seperti itu disimpan di halaman data primer selain disimpan di halaman overflow. Barracuda mendukung format baris dinamis , sehingga mungkin hanya menyimpan pointer 20-byte pada halaman data primer.

  • Tipe data ukuran variabel juga diawali dengan 1 atau lebih byte untuk menyandikan panjangnya. Dan format baris InnoDB juga memiliki array offset bidang. Jadi ada struktur internal yang kurang lebih didokumentasikan dalam wiki mereka . [EDIT] Tautan mati - di sini terlihat lebih baik sekarang.

Barracuda juga mendukung ROW_FORMAT = COMPRESSED untuk mendapatkan efisiensi penyimpanan lebih lanjut untuk data overflow.

Saya juga harus berkomentar bahwa saya belum pernah melihat meja yang dirancang dengan baik melebihi batas ukuran baris. Ini adalah "bau kode" yang kuat bahwa Anda melanggar kondisi grup berulang dari Bentuk Normal Pertama.

Bill Karwin
sumber
2
Sangat mudah bagi insinyur yang tidak sadar DB untuk menempuh rute flat data. itu tidak pernah melakukan. DB warisan saya sendiri yang memiliki situasi serupa tidak memukul ukuran baris sehingga kurang dramatis tetapi anak laki-laki itu adalah anugerah kinerja! Saya akan mengatakan insinyur pelaporan Anda perlu menerima bahwa mereka harus melakukan join dan hanya menebus pekerjaan itu dengan baik sepanjang pengindeksan.
TechieGurl
1

Situasi saya sedikit berbeda. Salah satu elemen data yang perlu saya simpan di setiap baris berpotensi sangat besar. (Bidang data adalah LONGBLOB untuk dokumen yang mungkin berisi beberapa gambar yang disematkan. Database sampel saya berisi dokumen berukuran 25 - 30 MB, tetapi dalam beberapa kasus, dokumen ini bisa lebih besar.) Tidak ada solusi yang saya temukan online yang memberikan bantuan . (Mengubah tipe file InnoDB ke Barracuda, meningkatkan ukuran file log, mengatur format baris ke COMPRESSED.)

Satu-satunya solusi yang saya temukan yang berhasil bagi saya adalah kembali ke MySQL 5.5.x dari MySQL 5.6.x.

David
sumber