Noindex Nedir? Ne Zaman ve Ne İçin Kullanılır?

Dünyadaki web site sayısı yaklaşık 2 milyara yaklaşmışken Türkiye’de ise bu sayı 50 milyon civarındadır ve 10 milyon kadarı aktif olarak işlemektedir. Durum böyle olunca bazı sayfaların birbirine benzemesi de kaçınılmaz hal alabilmektedir. Bu gibi durumlarda SEO uzmanlarının sıkça kullandığı noindex etiketi devreye girmektedir. Noindex nedir?
SEO çalışmalarında uygulanan ve kullanılan birçok terim bulunmaktadır. Noindex terimi de bunların içerisinde bulunur ve özellikle arama motorları tarafından indexlenmesini istemediğimiz sayfalarda kullanılır. Arama motorları bir sitenin tamamını tarar ve dizine ekler. Bu durum sayfanın indexlenmesidir. Böylece sayfa içeriğinde ve site genelinde gerekli puanlamalar yapılır ve herhangi bir anahtar kelime ile ziyaretçiler arama yaptıklarında uygun olan siteler arama motorlarının hesapladığı puanlarla belirli sıralamaya girer. Bu işlemin tam tersi olan yöntem de noindex etiketi ile gerçekleştirilir.
Noindex Etiketi Nedir?
Web sitenizin bazı içeriklerinin arama motorlarında görünmemesini isteyebilirsiniz. Hangi sayfanın arama motorlarında görünmemesini istiyorsanız o sayfalardaki HTML komutlarının arasında noindex etiketi kullanmalısınız. HTML komutlarındaki<head>…</head> bölümü arasında kullanılan bu etiket sayesinde arama motorları buradaki sayfa taramasını durdurur. Lakin sayfa içerisinde noindex kullanımı olsa dahil follow etiketine sahipse ve sayfa içerisinde herhangi bir yönlendirme varsa bu yönlendirmeleri takip eder. Yönlendirmeleri de takip etmemesi için nofollow etiketi kullanılmalıdır.
Neden Bazı Sayfalar Google’da İndekslenmemeli?
Noindex nedir? kavramını anladığımıza göre şimdi bu etiketin neden kullanılması gerektiğinden bahsedelim.
Arama motorlarında bulunan botlar bir web sitesine giriş yaptığında belirli bir süre zaman ayırmaktadır. Bu da tarama bütçesi olarak adlandırılmaktadır. Tarama bütçesi belirlenirken web sitenin hızı gibi birçok faktör Google tarafından değerlendirilmektedir. Arama motorunun belirlediği süre zarfında ne kadar sayfa tarayabiliyorsa o kadarını indexlemektedir. Hal böyle olunca site içerisinde benzer özelliklere sahip olan her sayfanın taranması diğer sayfalarda indexlenme sorunu oluşturacaktır. Bu nedenle SEO tarafından bakıldığında, benzer özellikteki sayfaların taratılmaması ve arda kalan sürenin diğer sayfalara yönlendirilmesi sağlanır. Bu da noindex etiketi ile yapılmaktadır.
Noindex Kullanımı
Çoğu arama motorunca sayfa içerisindeki <head> etiketi içinde kullanılan noindex etiketi kullanımı aşağıdaki gibidir.
- <meta name=”robots” content=”noindex”>
Tüm arama motorlarında indexlemeyi engellemek için kullanılır.
- <meta name=”googlebot” content=”noindex”>
Sadece Google tarayıcılarında sayfanın taranmaması için kullanılır.
WordPress alt yapısına sahip bir web siteniz varsa bu etiketleri kullanmanın daha kolay yöntemi mevcuttur. Özellikle SEO eklentilerinden birine sahipseniz paylaşım yaptığınız sayfa altında bulunan, “Arama sonuçlarında gösterilmesini istiyor musun?” diye bir seçenek sunulacaktır. Buradan “Evet” ya da “Hayır” seçilerek işlem tamamlanır. Bunun dışında robots.txt dosya içerisine aşağıdaki gibi kullanım yapılabilmektedir.
User-agent: Googlebot Disallow: /kategoriler/ | User-agent: * Disallow: /kategoriler/ | |
Google tarafından “kategoriler” bölümünün taranmaması istenilmektedir. | Tüm tarayıcıların “kategoriler” bölümünü taramamasını sağlayacaktır. |