Seo çalışması yaparken temelin sağlam atılabilmesi için çalışmalara öncelikle site içerisinden başlanılmaktadır. Site içerisinde de içerikler ve kod yapısı dışında bazı dosyalar ve Google Webmaster Tools ile yapılması gereken uygulamalar vardır. Robot.txt, Htaccess, site haritası ve 404 hata sayfalarının nasıl uygulanması gerektiğini bu yazımızda detaylıca anlatmaya çalışacağız.

 

Robot.txt Site Haritası Htaccess 404 Hata Sayfaları Optimizasyonu

 

– Robot.txt Dosyası

Bu dosya ile arama motorlarına sitemizde hangi sayfalara erişebileceğinin yetkisi vermekteyiz. İstediğimiz sayfaların da indexlenmesini engelleyebiliriz. Ya da Google botlarının indexlenmesini isteyip bing arama motorunun botlarını engelleyebiliriz. Robot.txt dosyası sitenizin ana dizininde bulunur. Arama motorlarının botları ilk olarak robot.txt dosyasını ziyaret eder. Bu dosyadaki izinlere ve yönlendirmelere göre sitenizi indexler. Bu sebeple bu dosyanın bulunması, arama motorlarının site haritanıza ve indexlenmesini istediğiniz yerlere yönlendirilmesi önemlidir. Aşağıda robot.txt dosyasında sıkça kullanılan birkaç önemli kodu ve ne işe yaradığını sizlerle paylaşıyoruz.

User-agent: *

Disallow:

Yukarıdaki kod ile tüm arama motorlarına tam yetki verilip, sitenin tüm sayfalarının indexlenmesine izin verilmektedir.

User-agent: *

Disallow:/

Yukarıdaki kod tam kısıtlama sağlayarak arama motorlarının sayfalarınızın tamamını indexlemesi engellenmiş olur.

User-agent: *

Disallow: /engellenendosya/

Disallow: /banaozelklasor/

Yukarıdaki kodlar ile kısmi olarak arama motorlarının botlarını engellemiş oluyoruz. Slash işareti içerisine yazılan klasörlere erişim engellenmiş olmaktadır.

User-agent: Google-bot-image

Disallow: /

Yukarıdaki kod ile Google botlarının sitenizdeki resimleri indexlemesi engellenmiş olmaktadır.

– Site Haritası

Site haritası (sitemap) web sitenizin tüm linklerinin bulunduğu xml formatında bir sayfadır. Statik çalışan (bir yönetim paneli olmayan html siteler) sayfalarda ise site haritası farklı bir xml dosya olarak kullanılmaktadır. Site haritası ile web sitenizin tüm linklerini arama motorlarının botlarına sunmuş olmaktasınız. Site haritasına yönlendirmeyi robot.txt dosyasından yapmalısınız. Site haritası ile daha hızlı index alır, tüm sayfalarınızın kolayca indexlenmesini sağlayabilirsiniz. Site haritanızı oluşturduktan sonra Google Webmaster Araçlarına muhakkak sitenizin site haritasını eklemelisiniz.

– Htaccess Dosyası

Htaccess dosyası web sitenizde ve sunucunuzda klasör bazlı işlemler yapabileceğiniz bir dosyadır. Htaccess ile Seo uyumlu link yapısı, dosyaları gizleme, klasör yetkilendirmesi, ip engelleme, domain yönlendirme, bakım sayfası oluşturma, spam engelleme gibi birçok uygulamayı yapabilmekteyiz. Htaccess içinde kullanılan onlarca farklı komut bulunmaktadır. Aşağıda örnek oluşturacak birkaç kodu sizlerle sunuyoruz.

#deny all Access deny from all (Tüm klasörlere erişim engellenir.)

#deny all Access deny from all allow from xxx.xxx.xxx.xxx # (Bu kod ile bir ip adresini engellemiş olacaksınız.)

allow from xxx.xxx.xxx.xxx # ip bloğu allow from xxx.xxx.xxx.xxx. # daha kapsamla ip bloğunu engellemiş olursunuz.

ErrorDocument 401/errors/401

ErrorDocument 403/errors/403

ErrorDocument 404/errors/404

ErrorDocument 500/errors/500

Yukarıdaki kod ile hata sayfaları için yönlendirme yapabilirsiniz.

Redirect 301/eskisayfa/ https://www.mucahitguner.com.tr/yenisayfa

Yukarıdaki kod ile kalıcı 301 sayfa yönlendirmesi yapabilirsiniz.

404 Hata Sayfaları

Web sitenizde bir url ziyaretçiler tarafından ziyaret edildiğinde Google botları tarafından o url indexlenir. İndexlenen urlnin sitenizde bir sayfası, bir karşılığı yoksa o url kırık link olmuş olacaktır. Bu da sizin sitenizin eksiği olduğu için Google tarafından sitenizde kalite değerlerinde düşüş yaşamanıza sebep olacaktır. Bunu engellemek için 404 hata olan urller için bir 404 sayfası hazırlayabilirsiniz. 404 sayfanızda bu urlnin kaldırılmış olabileceğini belirtip, farklı içeriklerinize yönlendirme yapabilirsiniz. 404 sayfanız muhakkak olmalıdır. Eğer 404 sayfası hazırlamak istemiyorsanız kırık olan linkleri direkt olarak belirleyip kalıcı 301 yönlendirmesi ile yeni sayfalarınıza yönlendirebilirsiniz. Bu sayede kırık link de ortadan kalkmış olacaktır. Sitenizdeki kırık linkleri belirlemek için Google’ın tarama hataları kısmına bakabilirsiniz. Bu kısımda indexlenemeyen, bir karşılığı olmayan urlleri görebilirsiniz.

mücahit güner

Mücahit GÜNER

Yazılım, Tasarım, Seo ve Digital Pazarlama uzmanıdır. Yirmi sekiz yaşında ve profesyonel olarak 8 yıllık deneyimi bulunmaktadır.

    Yorum Yok »

    Henüz Yorum Yapılmadı.

    Fikrini ya da Sorunu Paylaş