Saya harap pertanyaan ini sesuai untuk situs ini.
Saya menemukan bagian ini dalam The Three Body Problem , sebuah novel karya Liu Cixin:
Profesor itu telah memasang dua foto: Satu adalah lukisan Dinasti Song yang terkenal Sepanjang Sungai Selama Festival Qingming , penuh dengan detail yang kaya dan kaya; yang lain adalah foto langit pada hari yang cerah, hamparan biru tua yang pecah hanya oleh gumpalan awan ... Konten informasi foto itu - entropinya - melebihi lukisan itu dengan satu atau dua urutan magnitudo
Gambar representatif:
Apakah ini benar? Bagaimana seseorang menjelaskan fenomena yang berlawanan dengan intuisi ini?
Jawaban:
Tergantung bagaimana Anda mendefinisikan istilah "informasi" atau "entropi".
Definisi konvensional entropi gambar adalah menganggap gambar sebagai matriks dua dimensi piksel dan mana adalah probabilitas, yang dihitung dari histogram, dikaitkan dengan tingkat abu .p k k
Entropi semacam ini benar jika kita mengabaikan korelasi antar piksel. Misalnya dua gambar memiliki entropi yang sama dengan definisi ini.
Tidak benar jika korelasi antar piksel dipertimbangkan. Misalnya jika warna piksel pertama di kiri atas memiliki probabilitas , piksel berikutnya pasti memiliki warna yang sama dan warnanya tidak memiliki probabilitas sama .p kpk pk
Kami manusia, dengan Anda sebagai contoh, menggunakan korelasi semacam ini untuk memahami gambar. Jenis korelasi ini disebut "perincian", dan kami / Anda berharap bahwa gambar kaya detail harus memiliki lebih banyak informasi / entropi daripada yang sederhana. Ini adalah alasan mengapa Anda menemukannya berlawanan dengan intuisi.
PS:
Saya mencoba menghitung entropi dari dua gambar yang telah Anda posting, tetapi mereka tidak berbeda "dengan satu atau dua urutan besarnya" !!!!
"Sepanjang Sungai Selama Festival Qingming" entropi sekitar 7
"Langit" entropi sekitar 6
Itu tidak boleh file yang sama dengan profesor.
sumber
Pertama-tama, ini bukan lukisan itu sendiri tetapi foto (atau pemindaian) yang dapat kita bandingkan dengan foto (atau pemindaian) dari sesuatu yang lain, seperti pemandangan alam.
Berdasarkan gambar yang Anda berikan, lukisan itu secara perseptual tentu saja harus melibatkan lebih banyak informasi dibandingkan dengan langit yang sederhana. Hasilnya adalah bahwa ketika dikompresi, file lukisan akan lebih besar dari file langit di bawah algoritma kompresi yang sama.
Namun demikian, pemandangan langit yang sederhana dapat mencakup komponen yang tidak terlihat secara kasat mata seperti artefak kuantisasi, gradien warna, atau hal-hal serupa, yang, meskipun Anda tidak dapat melihat keberadaannya, suatu algoritma matematika masih akan diperlakukan sebagai informasi statistik sehingga entropi tersebut Batas gambar meningkat. Menghasilkan file yang lebih besar.
Hal yang sama tentu saja bisa terjadi pada file lukisan juga.
sumber
Keduanya mengandung informasi yang sama yaitu keduanya memiliki 1 bit informasi. Pertimbangkan di level papan ada 2 dua gambar satu lukisan dan foto lainnya. Jadi probabilitas satu gambar adalah 1/2 = 0,5. Seperti yang Anda tidak tahu yang mana gambar sebelum melihat mereka.
sumber