robots.txt nedir ne işe yarar - SADIK ÖZDOĞAN KİŞİSEL BLOĞU - SADIK ÖZDOĞAN KİŞİSEL BLOĞU
Okuma süresi: 1 dk, 31 sn
Yazar sadık özdoğan / web master
2 kişi beğendi.
432 kere okundu}
4 Nisan 2020

robots.txt nedir ne işe yarar

robots.txt dosyası nedir ve ne işe yarar?

Merhaba değerli okurlarım!
Bu yazımda sizlere bir web sitenin olmazsa olmazlarından olan robots.txt konusundan bahsedeceğim.
Robots.txt ile ilgili tüm merak edilenler ve bilinmesi gerekenler, nasıl robots.txt dosyası oluşturulur tüm detayları ile anlatacağım.
Eğer robots.txt hakkında bilgi sahibi değilseniz, mutlaka bu yazımı okumalısınız.

Robots.txt nedir

robots.txt dosyası: web sitemizde arama motorların hangi içerikleri indexleyip indexlemeyeceğini belirleyen bir sistemdir.
robots.txt dosyası seo için önemli bir adımdır. sitenizin mutlaka robots.txt dosyası bulunmalı ve bunu google gibi aramamotorlarının web master araçlarına göndermelisiniz.
google search console de yer alan robots.txt dosyası gönder kısmından robots.txt dosyanızı oluşturup gönderebilirsiniz.
ben sizler için basit bir robots.txt dosyası örneği yazacağım sizler bu örneğe göre kendiniz oluşturabilir ve google search console üzerinden oluşturabilirsiniz.
google search console ile ilgili detaylı bir yazı yazacağımı binmenizi isterim.

Örnek robots.txt dosyası nasıl olmalıdır

örnek bir robots.txt dosyası:
User-agent: GooglebotDisallow: /wp-content/
Disallow: /trackback/
Disallow: /wp-admin/
Disallow: /archives/
Disallow: /index.php
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.css$
Disallow: */feed/
Disallow: */trackback/User-agent: Googlebot-Image
Disallow: /wp-includes/User-agent: ia_archiver
Disallow: /User-agent: duggmirror
Disallow: /
burada hangi içeriklerin indexlenip, hangi içeriklerin indexlenmeyeceğini belirttik.
bu düzenlediğim robots.txt sadece google bot için düzenlenmiştir. ilk satırda arama motorlarını belirtmeniz gerekmektedir.
son olarak toparlayacak olursak: robots.txt dosyası arama motorlarının hangi sayfamızda gezip indexleyeceğini ve indexleyemeyeceğini belirten bir yapıdır.
sizlerde yazımı faydalı bulduysanız beğenmeyi unutmayın.
iyi bloglamalar herkese.

Bir önceki yazımız olan seo teknikleri başlıklı makalemizde back link, doğal back link ve page rank hakkında bilgiler verilmektedir.

2 kişi beğendi.

sadık özdoğan Hakkında

2015 yılından itibaren sadece wordpress üzerine çalışmalar yürütmekteyim. bu blogla birlikte tüm deneyimlerimi siz okurlarıma aktarmaya çalışacağım.

Yorum Yazın




*

code

site içi arama

sadık özdoğan
Yorumunuz için teşekkür ederim.
Plotter
En çok tercih edilenleri belirtmişsiniz gerçekten faydalı bir makale olmuş ellerinize sağlık.
sadık özdoğan
Allah sendende razı olsun kardeşim. sizlerin bilgilenmesi beni mutlu eder kardeşim.

Yukarı