Keşfedildi - şu anda dizine eklenmemiş: anlamı ve çözümü

Search Console’da Dizine ekleme > Sayfalar raporunu açtınız ve bir grup URL’nin Keşfedildi - şu anda dizine eklenmemiş başlığı altında beklediğini gördünüz. Teknik olarak bozuk bir şey yok: 404 yok, noindex yok, robots.txt engeli yok. Google bu sayfaların varlığından haberdar, sadece henüz gidip içeriğe bakmamış.

Bu rehberde bu durumu bir belirti olarak ele alıyoruz. Her olası neden için önce onu doğrulayan ya da eleyen kanıtları, ardından çözümü veriyoruz. Sonunda önümüzdeki bir-iki haftalık bir eylem planı ve işe yarayıp yaramadığını kontrol etme yöntemi var.

Bu durum tam olarak ne anlama geliyor?

Google URL’leri linkler, site haritaları ve başka kaynaklar üzerinden bulur, sonra taranmak üzere sıraya koyar. “Keşfedildi - şu anda dizine eklenmemiş”, URL’nin bu sırada olduğu ama henüz taranmadığı anlamına gelir. Google içeriği görmediği için kalitesi hakkında da bir karar vermemiştir. URL’lerden birini URL denetimi aracında açarsanız “Son tarama” alanının genellikle boş ya da “Yok” olduğunu görürsünüz. Bu boş alan, sorunun içerikte değil tarama planlamasında olduğunun en net işaretidir.

Google’ın Sayfa dizine ekleme raporu yardım sayfasındaki açıklamasına göre tarama, o an siteyi aşırı yükleyebileceği düşünüldüğü için genellikle ertelenmiştir. Pratikte bu durum, Google’ın bir URL’ye öncelik vermek için güçlü bir neden görmediği durumlarda da ortaya çıkar. Her iki durumda da yapılacak iş aynı: URL’leri taramayı hem kolay hem de değerli hale getirmek.

URL’leriniz ikinci sütuna geçtiyse çözüm farklıdır; Tarandı - şu anda dizine eklenmemiş rehberine göz atın.

Ne zaman normaldir, ne zaman kendiliğinden düzelir?

Yeni yayınlanmış bir sayfa, yeni gönderilmiş bir site haritası ya da toplu eklenen ürün sayfaları birkaç gün, bazen birkaç hafta bu durumda kalabilir ve siz hiçbir şey yapmadan taranır. Sağlıklı bir sitede burada birkaç URL görmek sorun değildir. Sayı sürekli artıyorsa, önemli sayfalar haftalardır burada bekliyorsa ya da yeni bir bölümün büyük kısmı buradan hiç çıkmıyorsa endişelenmeye başlayın.

1. neden: tarama kapasitesi, yavaş yanıtlar ve 5xx hataları

Google tarama hızını sunucunuzun ne kadar iyi dayandığına göre ayarlar. Yavaş yanıtlar, zaman aşımları ve sunucu hataları taramayı yavaşlatır; yeni URL’ler de sırada daha uzun bekler.

Nasıl anlarsınız?

• Search Console’da Ayarlar > Tarama istatistikleri bölümünü açın. Ana makine durumuna ve yanıt dağılımına bakın: son dönemde sunucu hatası, DNS ya da bağlantı sorunu var mı?
• Ortalama yanıt süresi grafiğini inceleyin. Yükselen bir eğilim ya da birikmenin başladığı döneme denk gelen sıçramalar sunucuyu işaret eder.
• Sayfalar raporunda keşfedilen URL’lerin yanında “Sunucu hatası (5xx)” nedeni de var mı, kontrol edin.
• Sunucu loglarına erişiminiz varsa Googlebot isteklerinin hangi kodla ve ne kadar sürede yanıtlandığına bakın.

Ne yapmalısınız?

• Önce 5xx hatalarının ve zaman aşımlarının kaynağını çözün: hosting limitleri, ağır veritabanı sorguları, eklentiler, hız sınırlama ya da Googlebot’u engelleyen veya yavaşlatan bir güvenlik duvarı.
• Mümkün olan yerde HTML önbelleği kullanın, çok sayıda URL üreten şablonlardaki yavaş sunucu tarafı işlemleri azaltın.
• Hatalar kesildiğinde Google taramayı genellikle kademeli olarak artırır. Ani bir sıçrama beklemeyin.

2. neden: tarama için yarışan değersiz ve parametreli URL’ler

Tarama bütçesi esas olarak büyük ya da hızlı değişen sitelerin sorunudur, ancak her site gerçek sayfa sayısından çok daha fazla URL üretebilir. Filtreler, sıralama seçenekleri, oturum ya da takip parametreleri, site içi arama sonuçları ve bitmeyen etiket veya takvim sayfaları, asıl taranmasını istediğiniz sayfalarla yarışır.

Nasıl anlarsınız?

• Keşfedilen URL’leri Sayfalar raporundan dışa aktarıp sıralayın. Çok sayıda ?sort=, ?filter=, ?page= benzeri varyant görüyorsanız sinyal güçlüdür.
• Tarama istatistiklerinde Googlebot’un çektiği örnek URL’lere bakın. Önem verdiğiniz sayfalar mı, yoksa parametre varyasyonları mı?
• Google’ın bildiği URL sayısını, gerçekten indekslenmesini istediğiniz sayfa sayısıyla karşılaştırın.

Ne yapmalısınız?

• Gereksiz varyantlara taranabilir link üretmeyi bırakın; örneğin her filtre kombinasyonunu düz bir <a href> ile linklemeyin.
• Hiç taranmaması gereken URL kalıplarını (site içi arama sonuçları gibi) robots.txt ile engelleyin. robots.txt’nin taramayı kontrol ettiğini, dizine eklemeyi değil, unutmayın.
• Kopyaları Google’ın yinelenen URL’leri birleştirme rehberinde anlatıldığı gibi kanonik (canonical) etiketle ana sürüme yönlendirin. Bu bir ipucudur ama işe yarar.
• Site haritasını temiz tutun: yalnızca kanonik, indekslenebilir ve 200 döndüren URL’ler.

3. neden: zayıf iç linkleme ve yetim sayfalar

Sadece site haritasında yer alan, hiçbir iç linkin işaret etmediği bir URL, Google’a önemi hakkında çok az şey söyler. Sayfalamanın arkasında, ana sayfadan çok sayıda tık uzakta kalan sayfalar da benzer durumdadır.

Nasıl anlarsınız?

• Sitenizi bir masaüstü tarayıcı (crawler) ile tarayın ve bulduğu URL’leri site haritasıyla karşılaştırın. Tarayıcının hiç ulaşamadığı site haritası URL’leri yetim sayfalardır.
• Takılan URL’lerin tık derinliğine bakın. Yalnızca sayfalı listelerin derinlerinden ulaşılabilen sayfalar bu durumda sık görülür.
• Linklerin HTML içinde gerçek <a href> öğeleri olduğundan emin olun; buton ya da JavaScript tıklama olayı değil.

Ne yapmalısınız?

• Takılan sayfalara güçlü ve sık taranan sayfalardan link verin: ana sayfa, kategori merkezleri, popüler yazılar.
• Açıklayıcı bağlantı metinleri kullanın ve iç linklerde nofollow kullanmayın.
• Merkez (hub) sayfalar ve ilgili içerik blokları ile derinliği azaltın. İç linkleme rehberi bunu adım adım anlatıyor.

4. neden: sayfa düşük öncelikli görülüyor

Google sırada neyi tarayacağına kısmen bir URL’nin ne kadar değerli olabileceğine bakarak karar verir. Sitenin bir bölümü geçmişte zayıf ya da birbirine çok benzeyen sayfalar ürettiyse, o bölümden gelen benzer görünümlü yeni URL’ler sırada geriye itilebilir.

Nasıl anlarsınız?

• Takılan URL’ler ortak bir şablonu ya da kalıbı paylaşıyor: etiket sayfaları, otomatik üretilmiş lokasyon sayfaları, neredeyse aynı ürün varyantları.
• Aynı bölümden daha önce taranmış benzer sayfalar “Tarandı - şu anda dizine eklenmemiş” ya da kopya olarak görünüyor.
• Sayfaların hiç backlink’i yok ve iç linkleri de az.

Ne yapmalısınız?

• Şablonu iyileştirin ya da birleştirin: zayıf varyantları tek sayfada toplayın, özgün içerik ekleyin, hiçbir aramaya cevap vermeyen sayfaları kaldırın.
• Arama sonuçlarında görmek istemediğiniz sayfaları Google’ın dizine eklemeyi engelleme rehberindeki gibi noindex ile işaretleyin ya da kaldırın; böylece kalanlar bir bütün olarak daha güçlü görünür.
• Önemli sayfalara doğal yollarla gerçek linkler kazanın. Link satın almayın, link şemalarına girmeyin.

5. neden: site çok yeni

Yeni bir alan adının tarama geçmişi yoktur ve az sayıda linki vardır; Google onu temkinli tarar. Yayına çıkarken yüzlerce sayfayı birden açmak, çoğunun bir süre bu durumda beklemesi demektir.

Nasıl anlarsınız?

• Search Console mülkü yakın zamanda oluşturuldu ve sitenin çok az backlink’i var ya da hiç yok.
• Tarama istatistikleri düşük ama sağlıklı bir etkinlik gösteriyor: hata yok, sadece istek sayısı az.

Ne yapmalısınız?

• Temiz bir site haritası gönderin (site haritası gönderme rehberine bakın) ve en önemli sayfalarınızın ana sayfadan linklendiğinden emin olun.
• Her şeyi bir anda değil, düzenli olarak yayınlayın; önce sıralanmayı gerçekten hak eden sayfalara odaklanın.
• Sabırlı olun. Yeni sitelerde bu durum, Google alan adına güven kazandıkça genellikle küçülür.

7–14 günlük eylem planı

1. 01

   1. gün: dışa aktarın ve gruplayın

   Dizine ekleme > Sayfalar > “Keşfedildi - şu anda dizine eklenmemiş” altındaki URL’leri dışa aktarın. Kalıba göre gruplayın: gerçek sayfalar, parametre varyantları, etiketler, sayfalama.

2. 02

   1–2. gün: sunucu sağlığını kontrol edin

   Tarama istatistiklerinde hata ve yanıt süresine bakın. 5xx hataları ya da zaman aşımları varsa her şeyden önce onları düzeltin.

3. 03

   2–4. gün: tarama israfını azaltın

   Gereksiz varyantlara verilen linkleri kaldırın, umutsuz URL kalıplarını robots.txt ile engelleyin, kanonik etiketleri ekleyin ve site haritasını yalnızca kanonik, indekslenebilir, 200 döndüren URL’ler kalacak şekilde temizleyin.

4. 04

   3–5. gün: önemli sayfalara iç link verin

   Güçlü sayfalardan indekslenmesini istediğiniz URL’lere iç link ekleyin ve tık derinliklerini azaltın.

5. 05

   5. gün: öncelikli URL’ler için tarama isteyin

   Birkaç kritik URL için URL denetiminde “Dizine eklenmeyi iste” seçeneğini kullanın (günlük kotası var, aynı URL için tekrarlamak işe yaramaz). Daha büyük gruplar için WeRankLab’in URL indeksleme aracı gibi bir tarama isteği hizmeti sayfaların taranmasını sağlayabilir; dizine eklenmeyi garanti etmez.

6. 06

   5–7. gün: site haritasını yeniden gönderin

   Temizlenmiş site haritasını Site haritaları bölümünden yeniden gönderin ve hatasız okunduğunu kontrol edin.

7. 07

   7–14. gün: izleyin ve doğrulayın

   Örnek URL’lerde URL denetimiyle “Son tarama” tarihinin oluşup oluşmadığına bakın ve Sayfalar raporunda doğrulamayı başlatın.

Düzeltmeyi Search Console’da nasıl doğrularsınız?

Başarı iki aşamada gelir. Önce URL’ler taranır: URL denetiminde “Son tarama” alanında bir tarih belirir. Ardından Google onları dizine ekleyip eklemeyeceğine karar verir. Bir URL’nin “Keşfedildi”den “Tarandı - şu anda dizine eklenmemiş” durumuna geçmesi, planlama sorununun çözüldüğü ve artık meselenin kalite olduğu anlamına gelir.

1. Değişiklikleriniz yayına girdikten sonra Dizine ekleme > Sayfalar’da “Keşfedildi - şu anda dizine eklenmemiş” nedenini açın ve Düzeltmeyi doğrula düğmesine tıklayın.
2. Doğrulama günler ile haftalar arasında sürer. Sayıyı ve başka nedenlere geçen URL’leri takip edin.
3. Yalnızca birkaç gün geriden gelen grafiğe güvenmeyin; önemli URL’leri URL denetimiyle tek tek kontrol edin.
4. URL’ler “Tarandı - şu anda dizine eklenmemiş” durumuna düşerse o rehberdeki çözümlere geçin.

Birkaç hafta sonra hiçbir şey değişmediyse kanıtlara geri dönün. Kalıcı bir birikme neredeyse her zaman yukarıdaki nedenlerden birine, çoğu zaman da birkaçına aynı anda dayanır. URL’ler başka nedenler altında da görünüyorsa sayfa dizine eklenmedi genel rehberi yardımcı olabilir.