Persyaratan khusus dari Tes Turing

9

Apa persyaratan khusus dari Tes Turing?

  • Apa persyaratan jika ada yang harus dipenuhi oleh evaluator agar memenuhi syarat untuk memberikan ujian?
  • Haruskah selalu ada dua peserta dalam percakapan (satu manusia dan satu komputer) atau dapatkah ada lebih banyak?
  • Apakah tes plasebo (di mana sebenarnya tidak ada komputer yang terlibat) diizinkan atau didukung?
  • Bisakah ada beberapa evaluator? Jika demikian, apakah keputusan tersebut harus disetujui secara bulat di antara semua evaluator agar mesin lulus ujian?
Luke
sumber

Jawaban:

9

"Tes Turing" secara umum dianggap sebagai versi terbaru dari Game Imitasi yang diusulkan Alan Turing dalam makalahnya tahun 1951 dengan nama yang sama. Versi awal memiliki manusia (pria atau wanita) dan komputer, dan hakim harus memutuskan yang mana, dan apa jenis kelamin mereka jika manusia. Jika mereka benar kurang dari 50% maka komputer dianggap "cerdas."

Versi yang berlaku umum saat ini hanya membutuhkan satu kontestan, dan seorang juri untuk memutuskan apakah itu manusia atau mesin. Jadi ya, kadang-kadang ini akan menjadi plasebo, secara efektif, jika kita menganggap manusia sebagai plasebo.

Pertanyaan pertama dan keempat Anda terkait - dan tidak ada pedoman yang ketat. Jika komputer dapat menipu sejumlah besar hakim maka tentu saja akan dianggap AI yang lebih baik.

University of Toronto memiliki bagian validitas dalam makalah ini tentang Turing , yang mencakup tautan ke komentar Jason Hutchens tentang mengapa tes Turing mungkin tidak relevan (manusia mungkin juga gagal) dan Hadiah Loebner , contoh resmi dari Turing Uji .

Rory Alsop
sumber
2

Sebenarnya ada dua pertanyaan di sini, yang bisa saya lihat. Salah satunya adalah "apa persyaratan khusus dari tes Turing asli, seperti yang dinyatakan oleh Turing sendiri?" Yang lain adalah "Apa yang seharusnya menjadi persyaratan khusus dari tes Turing modern?" Banyak hal telah meningkat sejak zaman Turing, dan saya pikir masuk akal bagi kita untuk mempertimbangkan memperluas / memodifikasi tesnya untuk mencerminkan pemahaman kita saat ini.

Jawaban untuk pertanyaan pertama cukup mudah untuk dicari, jadi saya pikir yang menarik adalah yang kedua. Apa yang harus tes untuk menentukan kecerdasan terlihat seperti? Dengan mengingat hal itu, saya pikir jawaban untuk keempat pertanyaan yang diajukan oleh OP adalah "itu tergantung". Saya tidak berpikir ada konsensus universal tentang bagaimana menyusun tes Turing yang sempurna, jadi eksperimen yang diberikan benar-benar bebas untuk mengatur hal-hal seperti yang dia inginkan.

Ini semua, tentu saja, berdasarkan asumsi bahwa tes Turing atau tes seperti Turing sebenarnya bernilai. Itu belum tentu diberikan. Pertimbangkan bahwa, sampai batas tertentu, apa yang kita bicarakan adalah merancang AI dengan kemampuan tipu daya yang luar biasa! Artinya, dengan asumsi si penanya diperbolehkan untuk hanya bertanya "apakah Anda manusia", maka kita harus berasumsi bahwa AI seharusnya berbohong jika ingin lulus tes. Jadi orang mungkin bertanya, apakah mendesain sistem menjadi benar-benar pandai berbohong, pendekatan yang berharga untuk AI?

mindcrime
sumber
0

Jika Anda ingin memahami relativitas, bacalah Einstein 1,2 , bukan buku tentang relativitas yang ditulis oleh seorang profesor yang berpikir bahwa ia mendapatkannya. Jika Anda ingin memahami tes Alan Turing untuk kecerdasan dalam konteks dialog manusia, baca Turing. 3 Penafsiran bisa lebih buruk daripada tidak berharga. Mereka sering menyesatkan. Jika prinsipnya tampak terlalu tebal, bacalah lagi sampai Anda mendapatkannya.

Dalam kasus tes Turing untuk kecerdasan dalam konteks dialog manusia, untuk memahaminya sepenuhnya, latar belakang berikut diasumsikan ketika Turing menulis, yang, jika Anda membaca artikelnya di tahun 1950, akan menjadi jelas.

  • Bagaimana teorema kelengkapan Turing merespons teorema ketidaklengkapan kedua Kurt Gödel
  • Strategi tes terkontrol
  • Perbedaan antara (a) mendengar dan berbicara dan (b) mendengarkan dan merespons dengan cerdik - Ini sangat relevan saat ini karena obrolan-bot melakukan (a) dan bisa berada di mana saja dari 5 hingga 500 tahun lagi dari melakukan (b). Untuk mencapai (c) memahami dan merespons secara mendalam dengan inspirasi, peneliti AI harus melampaui pemodelan pikiran manusia dan mendekati tantangan pemodelan pikiran orang-orang seperti Gödel, Einstein, dan Turing. Apakah itu akan terjadi belum diungkapkan.

Persyaratan khusus dari Permainan Imitasi, subtitle Alan Turing di atas deskripsi eksperimen pemikirannya, adalah masalah catatan.

Persyaratan Khusus [Kutipan dari Artikel Aktual]

[Permainan imitasi] dimainkan dengan tiga orang, seorang pria (A), seorang wanita (B), dan seorang interogator (C) yang mungkin berjenis kelamin sama. Interogator tinggal di ruangan yang terpisah di depan dua lainnya. Tujuan permainan untuk interogator adalah menentukan yang mana dari dua lainnya adalah pria dan mana yang wanita. Dia mengenal mereka dengan label X dan Y, dan di akhir permainan dia mengatakan "X adalah A dan Y adalah B" atau "X adalah B dan Y adalah A." Interogator diizinkan untuk mengajukan pertanyaan ke A dan B dengan demikian:

C: Apakah X tolong beri tahu saya panjang rambutnya?

Sekarang anggaplah X sebenarnya adalah A, maka A harus menjawab. Merupakan objek A dalam permainan untuk mencoba dan menyebabkan C membuat identifikasi yang salah. Karena itu jawabannya mungkin:

"Rambutku kusut, dan helai terpanjang sekitar sembilan inci panjangnya."

Agar nada suara tidak membantu interogator, jawabannya harus ditulis, atau lebih baik, diketik. Pengaturan yang ideal adalah memiliki teleprinter yang berkomunikasi antara dua kamar. Atau pertanyaan dan jawaban dapat diulangi oleh perantara. Objek permainan untuk pemain ketiga (B) adalah untuk membantu interogator.

Strategi terbaik baginya mungkin adalah memberikan jawaban yang jujur. Dia dapat menambahkan hal-hal seperti, "Saya wanita itu, jangan dengarkan dia!" untuk jawabannya, tetapi tidak akan berhasil karena pria itu dapat membuat pernyataan serupa.

Kami sekarang mengajukan pertanyaan, "Apa yang akan terjadi ketika mesin mengambil bagian A dalam game ini?" Akankah interogator memutuskan dengan salah sesering ketika permainan dimainkan seperti ini seperti yang dilakukannya ketika pertandingan dimainkan antara seorang pria dan seorang wanita? Pertanyaan-pertanyaan ini menggantikan yang asli, "Bisakah mesin berpikir?"

Ada ribuan kritik terhadap relativitas Einstein dan tes Turing, tidak ada yang menambah nilai. Pelajarilah pemikiran para kontributor besar melalui kata-kata mereka sendiri dan semua penolakan yang berikut akan menarik terutama karena kurangnya kebesaran.

Pertanyaan Sekunder dalam Topik Ini

Apa persyaratan jika ada yang harus dipenuhi oleh evaluator agar memenuhi syarat untuk memberikan ujian?

Interogator (C) bukan evaluator. Evaluasi akan menjadi upaya untuk bersikap objektif, namun premis dari eksperimen pemikiran Turing adalah bahwa interogator memberikan penilaian subyektif kepadanya. Dari sudut pandang statistik, interogator harus dipilih secara acak dari populasi dunia yang menggunakan bahasa lisan dengan (A) dan (B).

Haruskah selalu ada dua peserta dalam percakapan (satu manusia dan satu komputer) atau dapatkah ada lebih banyak?

Pasti ada dua yang sesuai dengan skenario yang dijelaskan oleh Alan Turing. (Lihat di bawah untuk detail lebih lanjut.)

Apakah tes plasebo (di mana sebenarnya tidak ada komputer yang terlibat) diizinkan atau didukung?

Seseorang dapat menguji segala macam hal, dan para peneliti melakukan, bagaimanapun, itu akan berada di luar ruang lingkup eksperimen pemikiran Turing. 4

Bisakah ada beberapa evaluator? Jika demikian, apakah keputusan tersebut harus disetujui secara bulat di antara semua evaluator agar mesin lulus ujian?

Apa yang akan mengungkapkan sebagian besar informasi kepada mereka yang mensponsori Permainan Imitasi yang sebenarnya adalah tes acak sepenuhnya ganda di mana (A), (B), dan (C) diambil dari sampel acak dari pria, wanita, atau perangkat lunak tersebut sistem dari tipe yang diuji yang dapat berkomunikasi dalam bahasa yang sama, dan tes akan dijalankan berkali-kali dengan pemilihan acak dari sampel.

Kebulatan suara, evaluasi, kompleksitas tambahan, dan komunikasi selain dari yang ditentukan oleh tes hanya akan menggagalkan penyebabnya, jika seseorang tetap dengan niat asli Turing mengenai pertanyaan, "Bisakah komputer berpikir?"

Pandangan Kecerdasan Lainnya

Turing, seperti halnya René Descartes, yang menyatakan bahwa mesin tidak akan pernah melewati versi yang lebih tidak terkendali dari Game Imitasi Turing, melihat kecerdasan melalui lensa dialog. Lainnya telah mempertimbangkan jenis dialog lain dan konteks selain dialog. Saya membahas hal ini dalam pertanyaan lain:

Bisakah otak menjadi cerdas tanpa tubuh?

Referensi dan Catatan Kaki

[1] Relativitas: Teori Khusus dan Umum oleh Albert Einstein, 1916

[2] Prinsip Relativitas oleh Albert Einstein dan Francis A. Davis, 1923

[3] AM Turing (1950) Mesin Komputasi dan Kecerdasan. Pikiran 49: 433-460. https://www.csee.umbc.edu/courses/471/papers/turing.pdf

[4] Artikel Turing pada 1950 tidak merekomendasikan bahwa eksperimen pemikirannya harus diwujudkan dan digunakan dalam validasi komersial sistem AI masa depan. Namun, Alan Turing prihatin dengan komputasi praktis pada satu titik tertentu dalam kariernya. Saat itulah Nazi menyerbu Prancis, menghancurkan tanah airnya dari udara, dan menenggelamkan sebagian besar Angkatan Laut Inggris dari bawah, dengan bantuan kriptografi Enigma.

Douglas Daseeco
sumber