Ahli Semalt: Panduan Untuk Mencegah Google Dari Merangkak Peta Situs Lama

Seiring pertumbuhan situs web Anda, Anda akan berusaha sebaik mungkin untuk menemukan cara untuk meningkatkan visibilitas dan kredibilitasnya di internet. Terkadang, efek dari bagaimana situs kami dulu bekerja tetap tertinggal, dan di sinilah kita harus memperhatikan.

Turun ke tips berikut dari Max Bell, Manajer Sukses Pelanggan Semalt , untuk mencegah Google merayapi situs lama.

Beberapa minggu yang lalu, salah satu klien saya memberi tahu saya bahwa dia memiliki situs web e-commerce. Itu melalui berbagai perubahan: dari struktur URL ke sitemap, semuanya dimodifikasi untuk membuat situs lebih terlihat.

Pelanggan memperhatikan beberapa perubahan di Google Search Console dan menemukan kesalahan Perayapan di sana. Apa yang dia amati bahwa ada sejumlah besar URL lama dan baru yang menghasilkan traffic palsu. Beberapa dari mereka, bagaimanapun, menunjukkan kesalahan Akses Ditolak 403 dan Tidak Ditemukan.

Pelanggan saya memberi tahu saya bahwa masalah terbesar yang dia miliki adalah peta situs lama yang ada di folder root. Situs webnya menggunakan berbagai plugin Peta Situs Google XML sebelumnya, tetapi sekarang ia bergantung pada WordPress SEO oleh Yoast untuk sitemap. Namun, berbagai plugin sitemap lama, membuatnya berantakan. Mereka hadir di folder root bernama sitemap.xml.gz. Sejak dia mulai menggunakan plugin Yoast untuk membuat peta situs untuk semua posting, kategori halaman dan tag, dia tidak membutuhkan plugin itu lagi. Sayangnya, orang tersebut tidak mengirimkan sitemap.xml.gz ke Google Search Console. Dia hanya mengirimkan sitemap Yoast-nya, dan Google juga merangkak sitemap lamanya.

Apa yang harus dirayapi?

Orang itu tidak menghapus sitemap lama dari folder root, jadi itu juga diindeks. Saya kembali kepadanya dan menjelaskan bahwa peta situs hanya merupakan saran dari apa yang harus dijelajahi dalam hasil mesin pencari . Anda mungkin berpikir bahwa menghapus peta situs lama akan menghentikan Google dari merayapi URL yang mati, tetapi itu tidak benar. Pengalaman saya mengatakan bahwa Google berupaya mengindeks setiap URL lama beberapa kali sehari, memastikan bahwa 404 kesalahan itu nyata dan bukan kecelakaan.

Googlebot dapat menyimpan memori tautan lama dan baru yang akan ditemukannya di sitemap situs Anda. Ini mengunjungi situs web Anda secara berkala, memastikan bahwa setiap halaman diindeks dengan benar. Googlebot mencoba mengevaluasi apakah tautan tersebut valid atau tidak valid sehingga pengunjung tidak mengalami masalah.

Jelas bahwa webmaster akan bingung ketika jumlah Kesalahan Perayapan mereka meningkat. Mereka semua ingin menguranginya sampai batas tertentu. Bagaimana cara memberi tahu Google untuk mengabaikan semua peta situs lama? Anda dapat melakukannya dengan membunuh semua perayapan peta situs yang tidak diinginkan, dan aneh. Sebelumnya, satu-satunya cara untuk memungkinkannya adalah file .htaccess. Terima kasih kepada WordPress yang telah menyediakan beberapa plugin bagi kami.

Situs web WordPress memiliki file ini di folder root mereka. Jadi, Anda hanya perlu mengakses FTP dan mengaktifkan file yang tersembunyi di cPanel. Buka opsi File Manager untuk mengedit file ini sesuai kebutuhan Anda. Anda tidak boleh lupa bahwa mengeditnya dengan salah dapat merusak situs Anda, jadi Anda harus selalu membuat cadangan semua data.

Setelah Anda menambahkan potongan ke file, semua URL yang kadaluwarsa akan hilang dari Kesalahan Perayapan Anda dalam waktu singkat. Anda tidak boleh lupa bahwa Google ingin Anda menjaga situs Anda tetap hidup, mengurangi kemungkinan 404 kesalahan.

mass gmail