Jika saya memiliki konten di balik formulir POST (kotak pilih, dalam kasus saya) apakah Googlebot, atau Spider Mesin Pencari lainnya dapat merayapi konten di balik formulir itu?
Misalnya, jika saya memiliki 4 terjemahan dari satu halaman, dan pemilihan bahasa adalah bentuk POST ke URL yang sama, yang kemudian dialihkan ke URL khusus bahasa, apakah Googlebot dapat merangkak ke bahasa "lain"?
sumber
Bing benar-benar melakukannya. Sebelum saya katakan tidak untuk itu akan terus mengirimkan formulir kontak dan formulir survei. Saya tahu itu Bingbot karena saya memasukkan $ _SERVER ['HTTP_USER_AGENT'] dalam informasi $ _POST. Tidak ada laba-laba lain yang pernah mengirimkan formulir itu.
sumber
Mereka bisa dan lakukan. Saya punya formulir pengumpulan email sederhana di bagian depan situs yang saya siap luncurkan. Saya baru saja menerima kiriman dari formulir itu dari IP
66.249.73.214
, yang merupakan IP GoogleBot.sumber