MySQL: VARCHAR Besar vs. TEKS?

Saya punya tabel pesan di MySQL yang merekam pesan antar pengguna. Terlepas dari id dan tipe pesan tipikal (semua tipe integer) saya perlu menyimpan teks pesan yang sebenarnya sebagai VARCHAR atau TEXT. Saya menetapkan batas front-end 3000 karakter yang berarti pesan tidak akan pernah dimasukkan ke db lebih lama dari ini.

Apakah ada alasan untuk menggunakan VARCHAR (3000) atau TEXT? Ada sesuatu tentang hanya menulis VARCHAR (3000) yang terasa agak kontra-intuitif. Saya telah melalui posting serupa lainnya di Stack Overflow tetapi akan lebih baik untuk mendapatkan tampilan spesifik untuk jenis penyimpanan pesan umum ini.

• TEXTdan BLOB mungkin dengan disimpan dari meja dengan tabel hanya memiliki pointer ke lokasi penyimpanan yang sebenarnya. Di mana itu disimpan tergantung pada banyak hal seperti ukuran data, ukuran kolom, row_format, dan versi MySQL.

• VARCHARdisimpan sejajar dengan tabel. VARCHARlebih cepat ketika ukurannya masuk akal, pengorbanannya akan lebih cepat tergantung pada data dan perangkat keras Anda, Anda ingin membandingkan skenario dunia nyata dengan data Anda.

Bisakah Anda memprediksi berapa lama input pengguna?

VARCHAR (X)

Kasus: nama pengguna, email, negara, subjek, kata sandi

---

TEKS

Kasus: pesan, email, komentar, teks berformat, html, kode, gambar, tautan

---

MEDIUMTEXT

Kasus: tubuh json besar, buku pendek sampai sedang, string csv

---

PANJANG

Kasus: buku teks, program, tahun file log, harry potter dan piala api, logging penelitian ilmiah

Hanya untuk mengklarifikasi praktik terbaik:

1. Pesan berformat teks hampir selalu disimpan sebagai TEXT (akhirnya panjangnya sewenang-wenang)

2. Atribut string harus disimpan sebagai VARCHAR (nama pengguna tujuan, subjek, dll ...).

Saya mengerti bahwa Anda memiliki batas ujung depan, yang sangat bagus sampai tidak. * nyengir * Caranya adalah menganggap DB terpisah dari aplikasi yang terhubung dengannya. Hanya karena satu aplikasi membatasi data, tidak berarti bahwa data secara intrinsik terbatas.

Ada apa dengan pesan itu sendiri yang memaksa mereka untuk tidak pernah lebih dari 3000 karakter? Jika itu hanya kendala aplikasi yang sewenang-wenang (misalnya, untuk kotak teks atau sesuatu), gunakan TEXTbidang di lapisan data.

Penafian: Saya bukan ahli MySQL ... tapi ini adalah pemahaman saya tentang masalah ini.

Saya pikir TEXT disimpan di luar baris mysql, sementara saya pikir VARCHAR disimpan sebagai bagian dari baris. Ada panjang baris maksimum untuk baris mysql .. sehingga Anda dapat membatasi berapa banyak data lain yang dapat Anda simpan dalam satu baris dengan menggunakan VARCHAR.

Juga karena VARCHAR membentuk bagian dari baris, saya menduga bahwa permintaan melihat bidang itu akan sedikit lebih cepat daripada yang menggunakan potongan TEXT.

Jawaban singkat: Tidak ada perbedaan praktis, kinerja, atau penyimpanan.

Jawaban panjang:

Pada dasarnya tidak ada perbedaan (dalam MySQL) antara VARCHAR(3000)(atau batas besar lainnya) dan TEXT. Yang pertama akan dipotong pada 3000 karakter ; yang terakhir akan dipotong pada 65535 byte . (Saya membuat perbedaan antara byte dan karakter karena karakter dapat mengambil banyak byte.)

Untuk batas yang lebih kecil VARCHAR, ada beberapa kelebihan di atas TEXT.

• "lebih kecil" berarti 191, 255, 512, 767, atau 3072, dll, tergantung pada versi, konteks, dan CHARACTER SET.
• INDEXesterbatas pada seberapa besar kolom dapat diindeks. (767 atau 3072 byte ; ini tergantung versi dan pengaturan)
• Tabel perantara yang dibuat oleh kompleks SELECTsditangani dengan dua cara berbeda - MEMORY (lebih cepat) atau MyISAM (lebih lambat). Ketika kolom 'besar' terlibat, teknik yang lebih lambat akan dipilih secara otomatis. (Perubahan signifikan datang dalam versi 8.0; jadi butir ini dapat berubah.)
• Terkait dengan item sebelumnya, semua TEXTtipe data (sebagai lawan dari VARCHAR) melompat langsung ke MyISAM. Artinya, TINYTEXTsecara otomatis lebih buruk untuk tabel temp yang dihasilkan daripada yang setara VARCHAR. (Tapi ini membawa diskusi ke arah ketiga!)
• VARBINARYseperti VARCHAR; BLOBseperti TEXT.

Bantahan terhadap jawaban lain

Pertanyaan asli menanyakan satu hal (tipe data mana yang digunakan); jawaban yang diterima menjawab hal lain (penyimpanan tidak direkam). Jawaban itu sudah ketinggalan zaman.

Ketika utas ini dimulai dan dijawab, hanya ada dua "format baris" di InnoDB. Segera setelah itu, dua format lagi ( DYNAMICdan COMPRESSED) diperkenalkan.

Lokasi penyimpanan untuk TEXTdan VARCHAR()didasarkan pada ukuran , bukan pada nama tipe data . Untuk diskusi terbaru penyimpanan on / off-record kolom teks / gumpalan besar, lihat ini .

Jawaban sebelumnya tidak cukup menekankan pada masalah utama: bahkan dalam pertanyaan yang sangat sederhana seperti

(SELECT t2.* FROM t1, t2 WHERE t2.id = t1.id ORDER BY t1.id) 

tabel sementara dapat diminta, dan jika suatu VARCHARbidang dilibatkan, itu dikonversi ke CHARbidang dalam tabel sementara. Jadi, jika Anda memiliki di meja Anda mengatakan 500 000 baris dengan VARCHAR(65000)bidang, kolom ini saja akan menggunakan 6,5 * 5 * 10 ^ 9 byte. Tabel temp semacam itu tidak dapat ditangani dalam memori dan ditulis ke disk. Dampaknya bisa menjadi bencana.

Sumber (dengan metrik): https://nicj.net/mysql-text-vs-varchar-performance/ (Ini merujuk pada penanganan TEXTvs VARCHARpada "standar" (?) Mesin penyimpanan MyISAM. Mungkin berbeda pada yang lain, mis., InnoDB.)

Ada perbedaan BESAR antara VARCHAR dan TEXT. Sementara bidang VARCHAR dapat diindeks, bidang TEXT tidak bisa. Bidang tipe VARCHAR disimpan inline saat TEXT disimpan offline, hanya pointer ke data TEXT yang sebenarnya disimpan dalam catatan.

Jika Anda harus mengindeks bidang Anda untuk pencarian yang lebih cepat, perbarui atau hapus daripada pergi untuk VARCHAR, tidak peduli seberapa besar. VARCHAR (10000000) tidak akan pernah sama dengan bidang TEXT karena kedua tipe data ini berbeda.

• Jika Anda menggunakan bidang Anda hanya untuk pengarsipan
• Anda tidak peduli tentang pengambilan kecepatan data
• Anda peduli tentang kecepatan tetapi Anda akan menggunakan operator '% LIKE%' dalam permintaan pencarian Anda sehingga pengindeksan tidak akan banyak membantu
• Anda tidak dapat memprediksi batas panjang data

daripada pergi untuk TEKS.

Varchar adalah untuk data kecil seperti alamat email, sedangkan Teks untuk data yang jauh lebih besar seperti artikel berita, Blob untuk data biner seperti gambar.

Kinerja Varchar lebih kuat karena berjalan sepenuhnya dari memori, tetapi ini tidak akan menjadi masalah jika data terlalu besar seperti varchar(4000)misalnya.

Teks, di sisi lain, tidak menempel ke memori dan dipengaruhi oleh kinerja disk, tetapi Anda dapat menghindarinya dengan memisahkan data teks dalam tabel terpisah dan menerapkan kueri gabung kiri untuk mengambil data teks.

Blob jauh lebih lambat jadi gunakan hanya jika Anda tidak memiliki banyak data seperti 10.000 gambar yang akan menelan biaya 10.000 catatan.

Ikuti tips ini untuk kecepatan dan kinerja maksimum:

1. Gunakan varchar untuk nama, judul, email

2. Gunakan Teks untuk data besar

3. Pisahkan teks dalam tabel yang berbeda

4. Gunakan kueri Gabung Kiri pada ID seperti nomor telepon

5. Jika Anda akan menggunakan Blob, terapkan tip yang sama seperti pada Teks

Ini akan membuat kueri biaya milidetik pada tabel dengan data> 10 M dan ukuran hingga 10GB dijamin.