14 Februari 2016

Trik Mengatasi Perangkap Laba-Laba (Spider Trap) Pada Situs

Jika mesin penelusur tidak bisa menelusuri situs Anda maka upaya optimasi akan menjadi sia-sia. Yang menjadi masalah utama dari ketidakmampuan mesin penelusur untuk menelusuri situs Anda adalah jebakan laba-laba. Jebakan tersebut akan menghambat perambah dan menghambat indeksasi.

Ilustrasi Trik Mengatasi Perangkap Laba-Laba (Spider Trap) Pada Situs - Dipopedia

Sebuah perangkap laba-laba adalah masalah struktural yang menyebabkan perambah terjebak dalam satu lingkaran pada halaman 'sampah' selamanya. Halaman sampah mungkin kombinasi dari berikut:
  • URL yang berbeda tak berujung yang mengarah ke halaman yang sama.
  • Halaman yang hanya berbeda oleh beberapa detil kecil.
  • Informasi yang sama disampaikan dengan cara yang berbeda tak berujung.
  • Halaman yang secara teknis unik, tetapi tidak memberikan informasi yang berguna.

Cara terbaik untuk mencari tahu apakah sebuah situs memiliki perangkap laba-laba adalah dengan menggunakan alat berbasis perambah seperti Screaming Frog, yaitu:
  • Aktifkan perambah untuk menelusuri situs dan biarkan berjalan untuk sementara waktu.
  • Jika penelusuran akhirnya selesai dengan sendirinya, maka tidak ada jebakan laba-laba.
  • Jika penelusuran terus berjalan untuk waktu yang sangat lama, maka mungkin ada perangkap laba-laba (atau situs mungkin saja sangat besar).
  • Menghentikan penelusuran.
  • Ekspor daftar URL.
  • Jika Anda menemukan pola di mana semua URL baru terlihat mencurigakan mirip satu sama lain, maka mungkin terdapat perangkap laba-laba.
  • Periksa secara seksama beberapa URL yang sama dalam browser.
  • Jika URL semua kembali persis halaman yang sama, maka situs Anda memiliki perangkap laba-laba.
  • Jika URL kembali halaman yang secara teknis sedikit berbeda, tetapi berisi informasi dasar yang sama, maka sangat mungkin perangkap laba-laba terbentuk di dalamnya.

Jika situs Anda berpotensi membentuk perangkap laba-laba, maka tindakan pencegahannya adalah sebagai berikut:
  • Lacak dan perbaiki tautan yang menciptakan tingkat direktori ekstra. Hal ini akan memperbaiki masalah untuk saat ini. Sadarilah bahwa masalahnya adalah kemungkinan akan terjadi di masa depan jika/ketika tautan yang buruk lain ditambahkan.
  • Jika Anda memiliki keterampilan teknis, Anda dapat menambahkan aturan untuk konfigurasi server untuk membatasi penulisan ulang untuk URL dengan jumlah tertentu garis miring di dalamnya. URL dengan jumlah yang salah dari garis miring tidak harus ditulis ulang. Hal ini akan menyebabkan tautan tersebut menampilkan kesalahan 404 (sebagaimana mestinya).
  • Jika semuanya gagal, Anda mungkin dapat memblokir URL perangkap menggunakan berkas teks robots.
Tidak ada komentar: