Crawl Budget (Tarama Bütçesi) Kavramı

Bir başarının hikayesi
Benoplast ile Başarı Hikayesi
27 Aralık 2017
hreflang etiketi nedir
Hreflang etiketi nedir? Nasıl kullanılır?
5 Mart 2018

Crawl Budget (Tarama Bütçesi) Kavramı

crawl budget kavramı nedir

Google web sitelerine bir tarama bütçesi verir. Bir nevi günde bir saat tarayacağını söyler. Bu bir saat içinde en doğru içeriği en hızlı şekilde taratmamız gerekir. Kalitesiz ve zayıf içerikli sayfalar, sunucu hataları gibi durumlar tarama bütçesinin kötü kullanımına ve azalmasına sebep olur. Kaliteli içerikler ve sunucu performansı bu bir saatin artmasına sebep olur.

Tarama bütçesinin artması sıralamanın doğrudan yükseleceği anlamına gelmese de Google’ın daha kaliteli içeriklere ulaştığına ve daha rahat tarama yaptığı anlamına gelir.

Deep Crawl gibi araçlarla yapılan çalışmalarla kalitesiz içerikler ve sorunlu url yapıları tespit edilebilir. Tespit edilen hataların düzeltilmesi için aşağıdaki yöntemler kullanılabilir.

 

Kaynaklar:

https://webmasters.googleblog.com/2017/01/what-crawl-budget-means-for-googlebot.html

https://webmasters.googleblog.com/2009/08/optimize-your-crawling-indexing.html

Robots.txt düzenlemesi:
Bu alanda yapacağımız çalışma Google için kalitesiz olan içerikleri engellemek olacaktır. Kalitesiz içerikten kasıt ise, yetersiz bilgi içeren sayfalar, benzer içeriğe sahip sayfalar, içerik üzerinde bir etki yapmayan url parametreleri, kullanıcıya göre değişim gösteren ödeme sepeti gibi sayfalardır.

Her subdomain için ayrı robots.txt sayfasına ihtiyaç vardır. Robots.txt ile engellenen bir domain veya subdomain bu engelin kaldırılması ile birlikte tekrar indexlenmeye başlar.

Örnek:https://www.facebook.com/robots.txt

Kaynak:https://support.google.com/webmasters/answer/6062608?hl=en

Canonical düzenlemesi:

Google canonical adresini dikkate alır ve bu adresi indexler. Aynı veya benzer içeriğe sahip iki sayfanız varsa bu sayfa kaynağında canonical adresi olarak verdiğiniz linki dikkate alacaktır Google.

https://seoliz.net/
<link rel=”canonicalhref=”//seoliz.net/“/>

https://seoliz.net/#gorusler
<link rel=”canonicalhref=”//seoliz.net/“/>

https://seoliz.net/#iletisim
<link rel=”canonical” href=”//seoliz.net/“/>

Kaynak: https://support.google.com/webmasters/answer/139066?hl=en

Nofollow düzenlemesi:
Bu yöntem tarama bütçesine çok etki etmese de sağlıklı tarama konusunda önemlidir. Genellikle oturum açma linkleri için kullanılır ev Google bu alanlardan uzak durur.

Facebook’dan örnekler:

<a href=”/policies/cookies/” id=”cookie-use-link” target=”_blank” rel=”nofollow”>Çerez Kullanımı</a>

<a href=”/about/privacy” id=”privacy-link” target=”_blank” rel=”nofollow”>Veri İlkemizi</a>

<a href=”/legal/terms” id=”terms-link” target=”_blank” rel=”nofollow”>Koşullarımızı</a>

Kaynak: https://support.google.com/webmasters/answer/96569?hl=en

Noindex düzenlemesi:

Kalitesiz, zayıf ve benzer içerikli sayfalarımız için bir de noindex meta tag vardır. Google bu etiketi sayfayı ziyaret ettikten sonra gördüğü için tek başına tarama bütçesini artırmakta çok yeterli olmamaktadır.

<meta name=”googlebot” content=”noindex”>

Hraflang düzenlemesi:

Çok dilli sitelerde bu meta etiketi Google’ın işini kolaylaştırmaktadır fakat doğru kurgulanması gerekmektedir. İngilizce olan bir içeriği farklı diller için hraflang kullanabilirsiniz ama bu farklı dillerdeki sayfalarda canonical etiketi olarak içeriğin dilini linklemeniz gerekmektedir.

Kaynak:https://webmasters.googleblog.com/2010/09/unifying-content-under-multilingual.html

Ayrıca farklı diller içinde bir default dil belirlemeniz gerekir ki bu da içeriğin dili olmalıdır.

<link rel=”alternate” href=”http://example.com/” hreflang=”x-default” />

Kaynak: https://webmasters.googleblog.com/2013/04/x-default-hreflang-for-international-pages.html

Performans:

Performansı da tarama bütçesi üzerinde çok büyük etkiye sahiptir. Google bir sayfayı taramak için harcadığı süre ne kadar azalırsa o kadar çok sayfayı taramaya başlar.

 

 

 

Kaynaklar:

https://webmasters.googleblog.com/2017/01/what-crawl-budget-means-for-googlebot.html

https://webmasters.googleblog.com/2009/08/optimize-your-crawling-indexing.html

https://webmasters.googleblog.com/2010/09/unifying-content-under-multilingual.html

https://support.google.com/webmasters/answer/93710?hl=en

https://webmasters.googleblog.com/2015/01/crawling-and-indexing-of-locale.html

https://webmasters.googleblog.com/2009/12/your-sites-performance-in-webmaster.html

https://webmasters.googleblog.com/2013/04/x-default-hreflang-for-international-pages.html

https://support.google.com/webmasters/answer/139066?hl=en

https://support.google.com/webmasters/answer/96569?hl=en

Bir Cevap Yazın

E-posta hesabınız yayımlanmayacak. Gerekli alanlar * ile işaretlenmişlerdir