Cara menyimpan Karakter Emoji di Database MySQL

Saya menggunakan karakter Emoji di proyek saya. Karakter-karakter itu disimpan (??) ke dalam database mysql. Saya telah menggunakan database Default collation di utf8mb4_general_ci. Itu menunjukkan

1366 Nilai string salah: '\ xF0 \ x9F \ x98 \ x83 \ xF0 \ x9F ...' untuk kolom 'komentar' di baris 1

langkah 1, ubah charset default database Anda:

ALTER DATABASE database_name CHARACTER SET = utf8mb4 COLLATE = utf8mb4_unicode_ci;

langkah 2, atur charset saat membuat tabel:

CREATE TABLE IF NOT EXISTS table_name (
...
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE utf8mb4_general_ci;

atau ubah tabel

ALTER TABLE table_name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;
ALTER TABLE table_name modify name text charset utf8mb4;

1) Basis Data: Ubah susunan default Basis Data sebagai utf8mb4 .

2) Tabel: Ubah susunan tabel sebagai CHARACTER SET utf8mb4 COLLATE utf8mb4_bin .

Pertanyaan:

ALTER TABLE Tablename CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_bin

3) Kode:

INSERT INTO tablename (column1, column2, column3, column4, column5, column6, column7)
VALUES ('273', '3', 'Hdhdhdh😜😀😊😃hzhzhzzhjzj 我爱你 ❌', 49, 1, '2016-09-13 08:02:29', '2016-09-13 08:02:29')

4) Ditetapkan utf8mb4dalam koneksi basis data:

  $database_connection = new mysqli($server, $user, $password, $database_name); 
  $database_connection->set_charset('utf8mb4');

Basis data dan tabel harus memiliki kumpulan karakter utf8mb4dan susunanutf8mb4_unicode_ci .

Saat membuat database baru Anda harus menggunakan:

CREATE DATABASE mydb CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;

Jika Anda memiliki database yang sudah ada dan Anda ingin menambahkan dukungan:

ALTER DATABASE database_name CHARACTER SET = utf8mb4 COLLATE = utf8mb4_unicode_ci;

Anda juga perlu mengatur set karakter dan susunan yang benar untuk tabel Anda:

CREATE TABLE IF NOT EXISTS table_name (
    ...
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE utf8mb4_unicode_ci;

atau ubah jika Anda memiliki tabel yang ada dengan banyak data:

ALTER TABLE table_name CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;

Perhatikan bahwa utf8_general_cipraktik terbaik tidak lagi direkomendasikan. Lihat tanya jawab terkait:

Apa perbedaan antara utf8_general_ci dan utf8_unicode_ci pada Stack Overflow.

Jika Anda menggunakan Solr + Mysql + Java, Anda dapat menggunakan:

Ini bisa digunakan:

• case1: Ketika Anda tidak ingin mengubah DB.
• case2: ketika Anda harus mengimpor emotikon dari Mysql ke Solr core Anda.

Dalam kasus di atas, ini adalah salah satu solusi untuk menyimpan emotikon di sistem Anda.

Langkah-langkah untuk menggunakannya:

Pustaka yang digunakan: import java.net.URLDecoder; import java.net.URLEncoder;

1. Gunakan urlEncoder untuk menyandikan String Anda yang memiliki emotikon.
2. Simpan di DB tanpa mengubah MysqlDB.
3. Anda dapat menyimpannya dalam solr core (bentuk yang didekodekan) jika diinginkan atau Anda dapat menyimpan formulir yang disandikan.
4. Saat mengambil emotikon ini dari DB atau Solr core Anda sekarang dapat mendekodekannya Menggunakan urlDecoder.

Contoh kode:

import java.net.URLDecoder;
import java.net.URLEncoder;

public static void main(String[] args) {
    //SpringApplication.run(ParticipantApplication.class, args);
    System.out.println(encodeStringUrl("🇺🇸🇨🇳🇯🇵🇩🇪🔳🔺🆔🆔🆑3⃣5⃣3⃣‼〽➗➗🎦🔆🎦🔆♋♍♋♍⬅⬆⬅⬅🛂🚹🛂🛄🚳🚬💊🔧💊🗿     "));
    System.out.println(decodeStringUrl("Hello+emoticons%2C%2C%F0%9F%98%80%F0%9F%98%81%F0%9F%98%8A%F0%9F%98%8B%F0%9F%98%8E%F0%9F%98%8A%F0%9F%98%8D%E2%98%BA%F0%9F%98%98%E2%98%BA%F0%9F%98%91%F0%9F%98%87%F0%9F%98%98%F0%9F%98%8B%F0%9F%90%84"));
}

public static String encodeStringUrl(String url) {
    String encodedUrl =null;
    try {
         encodedUrl = URLEncoder.encode(url, "UTF-8");
    } catch (UnsupportedEncodingException e) {
        return encodedUrl;
    }
    return encodedUrl;
}

public static String decodeStringUrl(String encodedUrl) {
    String decodedUrl =null;
    try {
         decodedUrl = URLDecoder.decode(encodedUrl, "UTF-8");
    } catch (UnsupportedEncodingException e) {
        return decodedUrl;
    }
    return decodedUrl;
}

Saya telah memperbarui database dan tabel saya untuk ditingkatkan dari utf8 ke utf8mb4 . Tapi tidak ada yang berhasil untuk saya. Kemudian saya mencoba memperbarui datatype kolom menjadi gumpalan , untungnya itu berhasil bagi saya dan data telah disimpan. Bahkan database dan tabel saya keduanya adalah CHARACTER SET utf8 COLLATE utf8_unicode

Perintah untuk memodifikasi kolom adalah:

ALTER TABLE TABLE_NAME MODIFY COLUMN_NAME TYPE;

Dan kita perlu menggunakan type = BLOB

Contoh untuk memodifikasi adalah di bawah: -

ALTER TABLE messages MODIFY content BLOB;

Saya memeriksa bahwa mySQL terbaru dan database lain tidak perlu ''digunakan dalam perintah pada table_name, column_name dll.

Mengambil dan Menyimpan data: Langsung menyimpan konten obrolan ke kolom dan untuk mengambil data, ambil data sebagai array byte (byte[])dari kolom db dan kemudian mengubahnya menjadi stringmisalnya (kode Java)

new String((byte[]) arr) 

Jawaban saya hanya menambah jawaban Selvamani P.

Anda mungkin juga perlu mengubah SET NAMES utf8kueri apa punSET NAMES utf8mb4 . Itu berhasil bagi saya.

Juga, ini adalah artikel yang bagus untuk port situs web Anda dari utf8 ke utf8mb4. Secara khusus artikel ini membuat 2 poin bagus pada indeks dan memperbaiki tabel setelah mengubahnya menjadi utf8mb4:

INDEKS

Ketika mengkonversi dari utf8 ke utf8mb4, panjang maksimum kolom atau kunci indeks tidak berubah dalam hal byte. Oleh karena itu, lebih kecil dalam hal karakter, karena panjang maksimum karakter sekarang empat byte, bukan tiga. [...] Mesin penyimpanan InnoDB memiliki panjang indeks maksimum 767 byte, jadi untuk kolom utf8 atau utf8mb4, Anda dapat mengindeks masing-masing maksimal 255 atau 191 karakter. Jika saat ini Anda memiliki utf8 kolom dengan indeks yang lebih panjang dari 191 karakter, Anda perlu mengindeks jumlah karakter yang lebih kecil saat menggunakan utf8mb4.

PERBAIKAN TABEL

Setelah memutakhirkan server MySQL dan membuat perubahan yang diperlukan dijelaskan di atas, pastikan untuk memperbaiki dan mengoptimalkan semua database dan tabel. Saya tidak segera melakukan ini setelah memutakhirkan (saya tidak berpikir itu perlu, karena semuanya tampak berfungsi dengan baik pada pandangan pertama), dan bertemu dengan beberapa bug aneh di mana pernyataan UPDATE tidak memiliki efek apa pun, meskipun tidak ada kesalahan dilemparkan.

Baca selengkapnya tentang kueri untuk memperbaiki tabel pada artikel.

Poin utama belum disebutkan dalam jawaban di atas bahwa,

Kita perlu meneruskan string kueri dengan opsi "useUnicode=yes"dan "characterEncoding=UTF-8"dalam string koneksi

Sesuatu seperti ini

mysql://USERNAME:PASSWORD@HOSTNAME:PORT/DATABASE_NAME?useUnicode=yes&characterEncoding=UTF-8

Nah, Anda tidak perlu mengubah Charset Whole DB. Alih-alih itu Anda bisa melakukannya dengan mengubah kolom ke tipe blob .

ALTER TABEL pesan MODIFIKASI konten BLOB;

Saya punya solusi yang baik untuk menghemat waktu Anda. Saya juga menemui masalah yang sama tetapi saya tidak bisa menyelesaikan masalah ini dengan jawaban pertama.

Karakter defualt Anda adalah utf-8. Tetapi emoji membutuhkan utf8mb4 untuk mendukungnya. Jika Anda memiliki izin untuk merevisi file konfigurasi mysql, Anda dapat mengikuti langkah ini.

Oleh karena itu, lakukan langkah berikut untuk memutakhirkan rangkaian karakter Anda (dari utf-8 ke utf8mb4).

langkah 1. buka my.cnf Anda untuk mysql, tambahkan baris berikut ini ke my.cnf Anda.

[mysqld]
character-set-server = utf8mb4
collation-server = utf8mb4_general_ci
init_connect='SET NAMES utf8mb4'

[mysql]
default-character-set = utf8mb4


[client]
default-character-set = utf8mb4

Langkah 2. hentikan layanan mysql Anda, dan mulai layanan mysql

mysql.server stop
mysql.server start

Jadi! Kemudian Anda dapat memeriksa karakter Anda diubah menjadi utf8mb4.

mysql> SHOW VARIABLES LIKE 'character_set%';
+--------------------------+----------------------------------------------------------+
| Variable_name            | Value                                                    |
+--------------------------+----------------------------------------------------------+
| character_set_client     | utf8mb4                                                  |
| character_set_connection | utf8mb4                                                  |
| character_set_database   | utf8mb4                                                  |
| character_set_filesystem | binary                                                   |
| character_set_results    | utf8mb4                                                  |
| character_set_server     | utf8mb4                                                  |
| character_set_system     | utf8                                                     |
| character_sets_dir       | /usr/local/Cellar/mysql@5.7/5.7.29/share/mysql/charsets/ |
+--------------------------+----------------------------------------------------------+
8 rows in set (0.00 sec)

Dukungan Emoji untuk aplikasi yang memiliki tumpukan teknologi - mysql, java, springboot, hibernate

Terapkan perubahan di bawah ini di mysql untuk dukungan unicode.

1. ALTER DATABASE <database-name> CHARACTER SET = utf8mb4 COLLATE = utf8mb4_unicode_ci;
2. ALTER TABLE <table-name> CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;

Koneksi DB - perubahan jdbc url:

jdbc:mysql://localhost:3306/<database-name>?useUnicode=yes&characterEncoding=UTF-8

Catatan - Jika langkah di atas tidak berhasil, perbarui versi konektor mysql ke 8.0.15. (mysql 5.7 berfungsi dengan konektor versi 8.0.15 untuk dukungan unicode)

Solusi paling sederhana yang berfungsi untuk saya adalah menyimpan data sebagai json_encode .

nanti saat Anda mengambil pastikan saja Anda json_decode itu.

Di sini Anda tidak perlu mengubah susunan atau rangkaian karakter dari database dan tabel.

Bagi siapa pun yang mencoba untuk memecahkan ini pada contoh MySQL berhasil (dalam kasus saya di AWS RDS), cara termudah adalah untuk memodifikasi kelompok parameter dan mengatur set karakter server dan pemeriksaan untuk menjadi utf8mb4dan utf8mb4_binmasing-masing. Setelah me-reboot server, permintaan cepat memverifikasi pengaturan untuk database sistem dan yang baru dibuat:

SELECT * FROM information_schema.SCHEMATA S;