SEO'da noindex ve index,follow Ayarları

Web sitenizin Google'daki kaderini kontrol etmek, bir orkestra şefi gibi arama motoru botlarını yönetmekten geçer. Hangi sayfalarınızın sahne ışıkları altında parlayacağını, hangilerinin ise kuliste kalacağını belirleyen en güçlü enstrümanlarınız ise noindex ve index,follow direktifleridir. Bu rehberde, bu kritik SEO ayarlarının ne anlama geldiğini, nasıl kullanılacağını ve sitenizin sağlığı üzerindeki etkilerini derinlemesine inceleyeceğiz.

'Noindex' Nedir ve Ne İşe Yarar?

Noindex, en basit tanımıyla, arama motorlarına bir sayfayı dizinlerine (index) eklememeleri için verilen bir komuttur. Googlebot gibi tarayıcılar bu etiketi gördüğünde, sayfayı tarayabilir, içindeki linkleri takip edebilir (eğer 'follow' direktifi de varsa) ancak o sayfayı arama sonuçlarında göstermez. Bu, sitenizin genel SEO kalitesini artırmak için stratejik bir hamledir.

Unutmayın: Bir sayfanın 'noindex' olarak ayarlanması, o sayfanın değersiz olduğu anlamına gelmez. Sadece arama sonuçlarında görünmesinin stratejik olarak istenmediği anlamına gelir.

Peki neden bir sayfanın Google'da görünmesini istemeyelim? Çünkü Google, sitenizi bir bütün olarak değerlendirir. Düşük kaliteli, yinelenen içerik barındıran veya kullanıcıya değer katmayan sayfaların dizine eklenmesi, sitenizin genel otoritesini ve "tarama bütçesini" olumsuz etkileyebilir. Noindex kullanarak, sadece en kaliteli ve alakalı sayfalarınızın Google'da yer almasını sağlarsınız.

'Index,Follow' Nedir ve Neden Standarttır?

Index,Follow, bir web sayfasının varsayılan durumudur. Bu, arama motorlarına "Bu sayfayı dizinine ekle ve bu sayfadaki tüm linkleri takip ederek yeni sayfalar keşfet" demektir. Eğer bir sayfada hiçbir robots meta etiketi belirtmezseniz, arama motorları onu otomatik olarak `index,follow` olarak kabul eder. Bu yüzden genellikle bu etiketi manuel olarak eklemenize gerek kalmaz.

Bu direktifin önemi, "normal" ve sağlıklı bir web sayfasının nasıl davranması gerektiğini tanımlamasından gelir. Sitenizdeki değerli blog yazıları, ürün sayfaları, hizmetler ve ana sayfa gibi tüm önemli içerikler bu varsayılan ayarda olmalıdır. Böylece hem kendileri arama sonuçlarında yer alır hem de site içi linkleme yapınız aracılığıyla diğer sayfalarınıza "link suyu" (link equity) aktarırlar.

Bu Ayarlar Nasıl Uygulanır? (Meta Etiketler ve X-Robots)

Bu direktifleri uygulamak için iki temel yöntem vardır:

1. Meta Robots Etiketi

En yaygın yöntemdir. Sayfanızın `` bölümüne küçük bir HTML kodu ekleyerek uygulanır. Bu yöntem, sadece HTML sayfaları için geçerlidir.

• Sayfanın dizine eklenmemesi, linklerin takip edilmesi için:
  <meta name="robots" content="noindex, follow">
• Sayfanın dizine eklenmesi ve linklerin takip edilmesi için (Varsayılan durum):
  <meta name="robots" content="index, follow">

2. X-Robots-Tag HTTP Başlığı

Bu yöntem, sunucu seviyesinde çalışır ve PDF, DOCX veya resim dosyaları gibi HTML olmayan içeriklerin dizine eklenmesini engellemek için kullanılır. Sunucu yapılandırma dosyaları (.htaccess gibi) üzerinden ayarlanır ve daha teknik bilgi gerektirir.

Pratikte 'Noindex' Kullanım Senaryoları

Teoriyi anladık, peki hangi sayfaları 'noindex' olarak işaretlemeliyiz? İşte en yaygın kullanım alanları:

1. Teşekkür Sayfaları: Bir form doldurulduktan veya satın alma yapıldıktan sonra gösterilen "Teşekkürler" sayfaları. Bu sayfaların arama sonuçlarında görünmesi anlamsızdır.
2. Yönetici ve Giriş Panelleri: `wp-admin` gibi yönetim panelleri veya kullanıcı giriş sayfaları, genel internet kullanıcısı için bir değer taşımaz.
3. İç Arama Sonuçları: Sitenizde yapılan bir arama sonucunda oluşan sayfalar, genellikle düşük kaliteli ve dinamik içeriklerdir. Bunların dizine eklenmesi kopya içerik sorunlarına yol açabilir.
4. Filtrelenmiş Sayfalar: E-ticaret sitelerindeki renk, beden veya fiyata göre filtrelenmiş sayfalar (örneğin, "kırmızı-large-tshirt" sayfası) binlerce kopya sayfa oluşturabilir. Bunları `noindex` yapmak SEO sağlığı için kritiktir.
5. Zayıf Arşiv ve Etiket Sayfaları: Çok az içerik barındıran veya sadece başka sayfalardan alıntılar içeren etiket (tag) ve tarih arşiv sayfaları 'noindex' olarak ayarlanabilir.

'Noindex' ve 'Nofollow' Arasındaki Kritik Fark

Bu iki terim sıkça karıştırılır ama görevleri tamamen farklıdır:

• Noindex: Sayfanın kendisine yönelik bir komuttur. "Bu sayfanın tamamını arama sonuçlarında gösterme" der.
• Nofollow: Sayfadaki linklere yönelik bir komuttur. "Bu sayfadaki linklere kefil değilim, onlara PageRank aktarma ve takip etme" der.

Yani, `noindex, follow` ayarı bir sayfayı dizinden çıkarırken, o sayfadaki linklerin değer aktarmasına ve takip edilmesine izin verir. Bu, özellikle site içi dolaşımı sağlamak için önemlidir.

Sık Yapılan Hatalar ve Dikkat Edilmesi Gerekenler

Bu güçlü araçlar yanlış kullanıldığında sitenize ciddi zararlar verebilir. İşte kaçınmanız gerekenler:

• Robots.txt ile Engelleme: `robots.txt` dosyasıyla taranmasını engellediğiniz bir sayfaya `noindex` etiketi koymak anlamsızdır. Googlebot sayfaya hiç ulaşamayacağı için `noindex` etiketini de göremez ve sayfa dizinde kalmaya devam edebilir.
• Tüm Siteyi Noindex Yapmak: Geliştirme aşamasında siteyi korumak için konulan `noindex` etiketini, site yayına alındıktan sonra kaldırmayı unutmak, sitenizin Google'da hiç görünmemesine neden olur.
• Sayfa Değerini Yanlış Anlamak: Sadece az trafik alıyor diye bir sayfayı `noindex` yapmak doğru değildir. O sayfa, başka önemli sayfalara link vererek site mimarinize katkı sağlıyor olabilir.

Sonuç

`Noindex` ve `index,follow` ayarları, teknik SEO'nun temel yapı taşlarıdır. Doğru kullanıldığında, Google'a sitenizin en değerli kısımlarını göstererek tarama verimliliğini artırır, kopya içerik sorunlarını önler ve sitenizin genel otoritesini güçlendirir. Bu direktifleri birer yasaklama aracı olarak değil, Google'a yol gösteren bir rehber olarak düşünerek sitenizin SEO stratejisini bir üst seviyeye taşıyabilirsiniz.