Alat yang bagus untuk menjelajah situs saya dan membantu saya menemukan tautan mati dan berkas yang tidak ditautkan [ditutup]

21

Saya memiliki situs warisan yang cukup besar dengan ribuan PDF yang kadang-kadang terhitung dalam database, tetapi sering hanya tautan di halaman, dan disimpan di sebagian besar direktori di situs.

Saya telah menulis perayap php untuk mengikuti semua tautan di situs saya, dan kemudian saya membandingkannya dengan dump pada struktur direktori, tetapi apakah ada sesuatu yang lebih mudah?

site-maintenance web-crawlers dead-links Tuan christer
sumber
Lihat juga webmasters.stackexchange.com/questions/13310/… yang juga bertanya tentang pemeriksaan ejaan.
James Skemp

Jawaban:

15

Saya telah menggunakan Xenu's Link Sleuth . Ini bekerja cukup baik, pastikan untuk tidak melakukan DOS sendiri!

plntxt
sumber
1
Periksa opsi 'File anak yatim' dalam opsi dan itu akan meminta Anda untuk login ftp ke situs Anda.
Pelms
Apakah ini menangani situs yang harus Anda masuk juga, untuk sampai ke halaman?
Donny V.
@ Jim Bagaimana saya bisa melihat halaman apa tautan rusak itu?
Rob
Setelah penjelajahan selesai, ada laporan yang akan memberi tahu Anda informasinya. Bergantung pada ukuran situs dan jumlah tautan yang terputus, sulit untuk diurai. Saya biasanya menyesuaikan opsi pelaporan sebelum perayapan, dan saya membuka laporan sebagai file teks (karena itu .htm) dan menghapus hal-hal yang tidak berkaitan untuk membuatnya lebih mudah dikelola. Semoga ini membantu.
plntxt
6

Jika Anda menggunakan windows 7 alat terbaik adalah SEO Toolkit IIS7 1.0. Ini gratis dan Anda dapat mengunduhnya secara gratis.

Alat ini akan memindai situs mana saja dan memberi tahu Anda di mana semua tautan mati itu, halaman mana yang butuh waktu lama untuk memuat, halaman mana yang memiliki judul yang hilang, judul duplikat, sama untuk kata kunci dan deskripsi, dan halaman apa yang telah merusak HTML.

Ben Hoffman
sumber
1
Saya menggunakan ini secara pribadi, dan itu sangat bagus untuk pemindaian dan tentu saja SEO, tetapi pemeriksaan FTP di Xenu hanya memperjelas ini.
Tn. Christer
1

Saya penggemar linklint untuk memeriksa situs-situs statis besar, jika Anda memiliki baris perintah unix (saya telah menggunakan linux, MacOS, dan FreeBSD). Lihat situs mereka untuk instruksi pemasangan. Setelah diinstal, saya membuat file bernama check.lldan lakukan:

linklint @check.ll

Seperti inilah file check.ll saya

# linklint
-doc .
-delay 0
-http
-htmlonly
-limit 4000
-net
-host www.example.com
-timeout 10

Itu merangkak www.example.comdan menghasilkan file HTML dengan laporan referensi silang untuk apa yang rusak, hilang, dll.

artlung
sumber
1

Ada beberapa produk dari Microsys , khususnya A1 Sitemap Generator dan A1 Website Analyzer yang akan merayapi situs web Anda dan melaporkan semua yang dapat Anda bayangkan tentang hal itu.

Itu termasuk tautan yang rusak, tetapi juga tampilan tabel dari semua halaman Anda sehingga Anda dapat membandingkan hal-hal seperti <title> dan tag deskripsi meta identik, tautan nofollow, meta noindex pada halaman web, dan banyak penyakit yang hanya membutuhkan mata yang tajam dan tangan cepat untuk memperbaikinya.

Evgeny
sumber
1

Link Examiner adalah freeware yang sangat bagus juga untuk kebutuhan Anda.

Gelap
sumber