Apa arti "Discovered – currently not indexed"?

Google telah menemukan URL tersebut, melalui tautan atau sitemap, tetapi belum mengambilnya, sehingga URL Inspection tidak menampilkan tanggal crawl terakhir. Penjelasan Google, biasanya crawl ditunda agar situs Anda tidak kelebihan beban. Beberapa halaman baru dengan status ini adalah hal normal dan akan teratasi dengan sendirinya. Ribuan URL yang tetap berada di status ini selama berminggu-minggu menandakan server yang tidak sanggup menanggung beban, atau situs yang menghasilkan lebih banyak URL daripada yang ingin di-crawl oleh Google.

Mengapa Google menunda crawl

Google menentukan seberapa banyak yang akan di-crawl berdasarkan dua hal:

• Kapasitas crawl. Seberapa banyak crawling yang sanggup ditangani server Anda. Respons yang cepat dan stabil menaikkannya; respons lambat, error 5xx, dan respons 429 menurunkannya.
• Permintaan crawl. Seberapa besar Google menginginkan URL Anda: seberapa populer URL tersebut, seberapa sering berubah, dan seberapa banyak inventaris URL Anda yang dinilai layak diambil. URL duplikat dan URL bernilai rendah menyia-nyiakan permintaan ini.

Setiap hostname diperlakukan sebagai situs terpisah, sehingga www.example.com dan shop.example.com di-crawl secara independen.

Apakah ini masalah bagi situs Anda?

Cara membuat halaman di-crawl

1. Periksa server terlebih dahulu. Buka Settings > Crawl stats dan lihat status host serta waktu respons rata-rata. Perbaiki error server dan respons lambat sebelum langkah lainnya. Lihat Crawl stats.
2. Pangkas URL yang seharusnya tidak ada. Blokir crawling varian faceted dan varian pengurutan di robots.txt, kembalikan 404 atau 410 untuk halaman yang sudah dihapus, perbaiki soft 404, dan persingkat rantai redirect. Jangan mengandalkan noindex di sini: Google tetap harus meminta halaman tersebut untuk bisa melihat tag-nya.
3. Tautkan halaman-halaman penting dari halaman yang sudah di-crawl dan diindeks. URL yang hanya diketahui dari sitemap memiliki bobot yang kecil.
4. Jaga sitemap tetap bersih. Cantumkan hanya URL kanonis yang dapat diindeks, dengan <lastmod> yang akurat saat konten berubah.
5. Gunakan permintaan pengindeksan secukupnya. Request indexing di URL Inspection membantu untuk beberapa halaman prioritas, dengan batas harian. Fitur ini tidak mengatasi antrean yang menumpuk di seluruh situs.

Jika jumlahnya tidak turun setelah server sehat dan inventaris URL bersih, periksa apakah halaman tersebut memang layak di-crawl: permintaan crawl juga bergantung pada seberapa berguna dan populer halaman tersebut menurut penilaian Google. Setelah di-crawl, sebuah halaman masih bisa berakhir di Crawled – currently not indexed. Untuk gambaran yang lebih luas, lihat crawl budget.

Bagaimana AutoPSEO membantu

Laporan Sitemap Performance menggabungkan daftar URL setiap sitemap dengan data halaman Search Console Anda, menampilkan berapa banyak URL terdaftar yang mendapat klik, berapa banyak yang tidak mendapat klik, dan berapa banyak yang sama sekali tidak pernah muncul di Search Console, tempat halaman yang belum ditemukan dan belum di-crawl bersembunyi. Index Tracker kemudian memeriksa URL yang Anda pedulikan setiap hari melalui URL Inspection API dan mencatat hari pertama setiap URL diindeks, sehingga Anda dapat melihat berapa lama halaman baru membutuhkan waktu di situs Anda.

Sumber: Page indexing report help, crawl budget guide, dan URL Inspection tool help dari Google.