Google, web üzerindeki milyarlarca sayfayı tarayan bilgisayar sisteminin adıdır. Google tarafından yapılan web araması, dijital kütüphaneciliğe benzetilebilir. Google, kullanıcının arama sorgularına uygun olarak dizinindeki web sayfalarını kullanıcıya sunar. Google, web arama ve dizinleme sırasında belli özellikleri gizli tutulan algoritmalar kullanır.
GoogleBot
Google arama motoru sistemi, web üzerindeki site kaynaklarını Googlebot adı verilen arama robotu programı ile inceler. Googlebot arama robotuna, kısaca bot da denilir. Web Crawlers veya Spiders olarakta bilinen diğer önemli arama motorları; Bingbot, AOL, Yahoo! Slurp, All the web, Lycos, Inktomi ve Teoma'dır.
Googlebot, bir web sitesini 3 aşamada inceler.
1- Tarama
2- Dizine ekleme
3- Sonuçları sunma
Tarama
Google, dizinine ekleyeceği yeni ve güncel sayfaları Googlebot (Web Spiders) programı ile inceler. Googlebot, her gün milyarlarca web sayfasını düzenli olarak taramaktadır.
Googlebot’un tarama işleminde, önce web sayfasının robots.txt dosyası sorgulanır, engel olup olmadığı tanımlanır. Eğer site genel aramaya açık ise bot, site haritasını ve URL listesini tarar. Sonraki aşamada bot, sayfalar içinde ve dışındaki bağlantıları takip eder.
Dizine ekleme
Google arama robotu, tarama yaptığı her sayfayı değerlendirir ama sayfanın dizine alınması (indekslenme) garantisini vermez. Bot, site sayfalarını teknik ve içerik standartları olarak 200 yakın parametre içinde inceler. Metin tabanlı olmayan ve tanım etiketleri (meta tags) sorunlu sayfalar indekslenmeyebilir. Meta tags hakkında bilgiye buradan ulaşabilirsiniz: Meta Tags: Title, Description, Keywords, Content ve SEO
Tabi ki, yazılım yarı-otomatik bir sistemle hareket ettiği için tüm içerik ve yapının tanımlaması ve doğru değerlendirmesi mümkün değildir.
Tabi ki, yazılım yarı-otomatik bir sistemle hareket ettiği için tüm içerik ve yapının tanımlaması ve doğru değerlendirmesi mümkün değildir.
Sonuçları sunma
İnternet kullanıcısı sorgu yaptığında arama motoru, sorgu ile bot tarafından işlenmiş dizin bilgisi arasında aynılık ve alaka düzeyinde eşleşen sonuçları kullanıcıya sunar.
Sorgu ve dizin sonuçları değerlendirilirken en önemli kriterler, Backlink ve PageRank’dir. Backlink, bir siteden bir başka siteye verilen referans bağlantıdır. Web değeri yüksek bir siteden link bağı almış sitenin, Google gözünde PageRank değeri yüksek olacak ve arama sonucunda öncelik kazanacaktır.
Sitenizin Google’daki dizinini öğrenin!
Sitenizin, Google dizininde ne şekilde yer aldığını görebilmek için, sitenizin tam URL ismi üzerinden basit bir sorgu yapabilirsiniz. Örneğin, http://www.beyazperde.com/ sinema sitesinin Google dizinindeki konumunu görmek için, site: sonrasında URL yazmanız yeterlidir.
site: http://www.beyazperde.com/
Yukarıdaki sorgu sonrası oluşan sonuçlar, sitenizin Google arama motoru dizinine eklenmiş içeriğinin sonuçlarıdır. Belli bir zaman geçmiş olmasına rağmen hala dizine eklenmeyen içerikleriniz var ise, Google'ı bilgilendirebilirsiniz.
Google Web Yöneticisi Araçları
Bir Gmail hesabı ile ücretsiz web master hizmeti alabileceğiniz Google Web Yöneticisi Araçları, Google dizin işlemleri için en doğru kaynaktır. Dizin konusunda olası teknik hatalarını öğrenmek için Web Yöneticisi Araçları’ndaki “Tarama hataları” sayfasını inceleyip, düzenlemeye gidebilirsiniz.
Web Yöneticisi Araçları sayfasında, dizin hataları ve web yönergelerini incelip ve sayfanızı optimize edebilirsiniz. En temel site optimizasyon yönetimi, Web Yöneticisi Araçları’ndan elle düzenleyeceğiniz “site haritası gönder” “dizin ekle” ve “url engelle” bildirimleridir.
Ahmet Usta
Kaynak:
https://www.google.com/webmasters/tools/
http://www.robotstxt.org
http://www.sitemaps.org/tr/
