Screaming Frog İçin En İyi Uygulamalar

Screaming Frog SEO Spider bir sıralama veya ‘site skoru’ aracı değil; yapılandırılabilir bir web crawler’dır. Amacı: URL’leri keşfetmek, durum kodları, yönlendirmeler, başlıklar, meta, canonical, hreflang, kırık linkler ve seçtiğiniz özel alanları toplamak. Bu yazı trafik vaadi vermez; doğru config, kapsam, export ve triyaj alışkanlığı kurar. Resmi ürün: Screaming Frog SEO Spider.

Bölüm 1Araç rolü: keşif ve envanter, otorite skoru değil

Frog’u şu işler için kullanın:

• Yayın öncesi/sonrası teknik regresyon (şablon kırılması).
• 4xx/5xx, redirect zinciri, mixed content, kırık iç link envanteri.
• Title/H1/meta/canonical tutarsızlıklarının kümelenmesi.
• Sitemap ile crawl farkının bulunması.

Şunlar için birincil kaynak saymayın: anahtar kelime zorluğu, backlink değeri, ‘rakibinizi geçtiniz’ raporları. Suite karşılaştırması için Semrush ve Ahrefs yazıları ayrı bağlamdır. Teknik omurga: teknik SEO checklist.

Frog çıktısı ‘audit skoru %72’ gibi tek sayıyla yönetilmemelidir. Skorlar önceliklendirmeyi gizler; sizin işiniz URL ve şablon gerçeğini ticket’a çevirmektir. Aynı crawl’ı farklı ekipler farklı sorularla okur: mühendislik 5xx ister, içerik title çakışması, SEO canonical/hreflang. Export’u soruya göre bölmek, tek ‘SEO PDF’ üretmekten daha değerlidir.

Bölüm 2Kurulum: crawl’ı sınırlamadan önce sözleşme yazın

Yanlış config, yanlış gerçeklik üretir. Crawl başlatmadan önce:

• Kapsam: alt klasör mü, tüm domain mi, alt domain’ler dahil mi?
• robots.txt’e uyum: staging’de bilinçli override gerekebilir — üretimde genelde uyun.
• Hız / eşzamanlılık: sunucuyu ezmeyin; ofis saatleri dışında veya düşük thread.
• JS rendering: gerçekten JS’e bağlı içerik varsa açın; her crawl’da varsayılan maliyetlidir.
• Query parametreleri: oturum/filtre parametrelerini crawl’a boğmayın (include/exclude).

robots ve sitemap yüzeyi için hızlı üretim/kontrol: robots.txt oluşturucu, sitemap oluşturucu. Meta robots yorumu: robots meta etiketi.

Kimlik ve ortam

Staging’i tararken basic auth, cookie veya custom header gerekebilir. Üretim crawl’ında kişisel hesap cookie’si taşımak ‘giriş yapmış kullanıcı’ HTML’i üretebilir — anonim ziyaretçi deneyimini kaçırır. User-agent’ı dokümante edin; güvenlik ekipleriyle önceden konuşun.

Liste modu (upload URL list) tam site crawl’ının alternatifi değil tamamlayıcısıdır: sitemap’teki öncelikli URL’ler, son deploy’da değişen şablon örnekleri veya GSC’de görünen sorunlu adresler. Karışık modda ‘siteyi bitirdik’ sanrısına düşmeyin — kapsamı raporda açık yazın. Resmi özellik ve sürüm notları için Screaming Frog SEO Spider sayfasını takip edin.

Bölüm 3Workflow: tar → sınıflandır → önceliklendir → ticket

Ham crawl klasörü rapor değildir. Tekrarlanabilir akış:

• 1) Crawl config’i kaydet (config dosyası / proje) — ‘elle her seferinde’ yasak.
• 2) Response Codes, Page Titles, Meta Description, Canonicals, Directives, Hreflang sekmelerini tarayın.
• 3) Export’u şablon bazında kümeleyin (URL pattern), tek URL listesinde boğulmayın.
• 4) P0: 5xx, kritik yönlendirme döngüsü, yanlış noindex şablonu; P1: yaygın 404, zincir; P2: title/meta hijyeni.
• 5) Ticket’a örnek URL + etkilenen şablon + kabul kriteri yazın.

Kırık link odaklı hızlı kontrol için kırık link kontrolü tamamlayıcıdır; site geneli crawl yerine geçmez. Crawl hata dili: crawl hataları adım adım.

Bölüm 4Crawl verisini okumak: sinyal mi gürültü mü?

Yaygın yanlış okumalar:

• ‘Missing meta description’ = otomatik felaket değil; öncelik şablon ve önemli URL’lerdedir.
• Canonical ‘almost’ uyarılarını tek tek değil kural olarak okuyun.
• Facet / arama sonuç URL’leri index şişmesi yaratıyorsa sorun config + IA’dır, ‘title yazmak’ değil.
• JS kapalıyken boş title görüp paniklemek — rendering ihtiyacını doğrulayın.

Karşılaştırma crawl’ları (önce/sonra) aynı config ile yapılmalı. Aksi halde ‘sorunlar arttı’ aslında kapsam genişlemesidir. Tek URL smoke için SEO analiz aracı kullanılabilir.

Yönlendirme zincirlerini tek tek ‘güzel URL’ diye bırakmayın: her hop gecikme ve bütçe riskidir. 3xx’i hedef 200’e indirin; geçici/kalıcı ayrımını bilinçli seçin. Soft 404 (200 dönüp ‘bulunamadı’ içeriği) crawl sekmesinde her zaman bağırmaz — içerik örneklerini elle doğrulayın. Robots meta ve noindex yanlışlıkları için robots meta etiketi ile çapraz okuyun.

Bölüm 5Sınırlar: bulut suite ve Frog yan yana

Cloud SEO suite’ler (zamanlanmış site audit, backlink index, rank tracking, rakip keşfi) farklı iş paketidir. Frog’un gücü: yerel kontrol, özel extraction, büyük export, yayın anı regress. Suite’in gücü: sürekli izleme ve pazar verisi. İkisini tek skorda birleştirmeyin.

• Frog: ‘bu deploy neyi kırdı?’
• Suite: ‘pazar ve bağlantı bağlamı nedir?’
• GSC: ‘Google ne gördü / ne tıklattı?’ — birincil arama verisi.

Özet: Screaming Frog’u crawler olarak saygıyla kullanın; config’i kaydedin, kapsamı bilinçli seçin, export’u şablonla triyaj edin, suite ve sıralama iddialarından ayırın. Resmi dokümantasyon ve sürüm notları için yine Screaming Frog SEO Spider sayfasını takip edin.

Donanım ve zaman da sınırdır: çok büyük crawl’ları parçalayın (alt klasör bazlı), sonuçları birleştirin, makineyi günlerce kilitleyen ‘tek seferde her şey’ ritüelinden kaçının. Zamanlanmış bulut audit ile yerel Frog regress’ini takvimde ayırın — ikisi aynı gün çakışınca hangi kaynağın doğru olduğu belirsizleşir. Amaç: doğru soruya doğru araç, tek ‘SEO platformu’ miti değil.

Export disiplini ve arşiv

Her crawl’ı tarih + config adı + kapsam notuyla arşivleyin. Üç ay sonra ‘o uyarı vardı’ tartışmasında ham proje dosyası yoksa öğrenme kaybolur. Paylaşılan drive’da son iki production crawl + son staging regress yeterli bir minimumdur. Hassas staging URL’lerini genel Slack’e yapıştırmayın; ticket’a örnek ve desen yazın. Bu hijyen sıralama getirmez; teşhis süresini kısaltır.

Custom extraction (CSS/XPath) ile şablon alanlarını (ör. product SKU, breadcrumb JSON) toplayabilirsiniz; yine de extraction kırılganlığını test edin — DOM değişince sessizce boş döner. Extraction’ı ‘sürekli izleme’ sanmayın; suite monitor veya CI smoke ayrı işlerdir. Crawl hatalarını işleme sırası için yeniden: crawl hataları.