Büyük bir web sitesinde (yüzlerce / binlerce URL) SEO’nun en görünmeyen ama en kritik sorunlarından biri tarama bütçesidir (crawl budget). Basitçe: Arama motorlarının sitenize ayırdığı tarama enerjisi sınırlıdır. Bu enerji, “önemsiz URL’lerde” harcanırsa, asıl değerli sayfalarınız geç taranır, geç indekslenir veya hiç indekslenmez. AI SEO açısından da benzer bir mantık çalışır: İçeriklerinizin “bulunabilirlik” ve “seçilebilirlik” şansı, önce doğru şekilde keşfedilip indekslenmesine bağlıdır.
Crawl Budget’ı Ne Tüketir?
- Parametreli URL’ler:
?filter=,?sort=gibi sonsuz varyasyonlar - Arama sonuç sayfaları / iç arama URL’leri
- Tag/etiket arşivleri (özellikle WordPress’te kontrolsüz üretildiyse)
- Boş veya benzer sayfalar (thin / duplicate)
- Hatalı yönlendirmeler (zincir redirect) ve 404’ler
- Yavaş sunucu yanıtı (bot daha az sayfa tarar)
Büyük Siteler İçin Pratik Çözüm Seti
- İndeks haritası çıkarın: Sitenizde “indekslenmesi gereken” sayfaları kategori/hizmet/ürün/vaka gibi kümelere ayırın.
- Parametre yönetimi: Filtre sayfalarını noindex yapmak, canonical ile asıl kategoriye bağlamak veya robots.txt ile botu gereksiz alanlardan uzaklaştırmak.
- Site haritasını (XML Sitemap) akıllılaştırın: Yalnızca indekslenmesini istediğiniz URL’leri koyun.
- İç linkleme: En değerli sayfalarınız ana menü, footer, ilgili içerikler ve breadcrumb ile sık erişilebilir olmalı.
- Log analizi: Googlebot en çok nereye gidiyor? Gerçek tarama davranışı, teoriyi bozar veya doğrular.
AI SEO Notu
AI destekli arama/özetleme sistemleri genelde “en iyi kaynakları” seçer ama kaynak seçimi için önce sayfanın stabil, hızlı, indeksli ve net olması gerekir. İndekslenmeyen veya geç indekslenen sayfa, AI sonuçlarında görünme fırsatını kaybeder.
Hızlı Kontrol Listesi
- İç arama sayfaları indeksleniyor mu?
- Parametreli URL sayısı kontrol altında mı?
- Sitemap “temiz” mi?
- 404/redirect zincirleri var mı?
- Sunucu yanıt süreleri iyi mi?
