Googlebot

Dzisiejsze zagadnienie, które poruszymy w słowniku SEO Samodzielni – Googlebot. To dzięki niemu Twoja strona może pojawić się w SERP-ach!

Co to jest Googlebot?

Googlebot (nazywany też pająkiem lub botem) jest robotem indeksującym wyszukiwarki Google. Jego zadanie to skanowanie sieci w poszukiwaniu nowych adresów URL, a następnie sprawdzanie ich, klasyfikowanie oraz dodawanie do indeksu, czyli bazy danych wyszukiwarki.

Skanowanie i indeksowanie to czynności, dzięki którym witryna ma szansę pojawić się w wynikach wyszukiwania na zapytanie użytkownika. Jeśli adres URL nie zostanie dodany do indeksu przez Googlebota, pozycjonowanie nie przyniesie oczekiwanych rezultatów.

Jak Googlebot trafia na stronę internetową?

Googlebot znajduje nowe strony w sieci przede wszystkim dzięki prowadzącym do nich linkom. Jeśli ktoś umieścił u siebie odnośnik do Twojej witryny, po pewnym czasie system indeksujący podąży za nim i po sprawdzeniu zawartości doda adres URL do swojej bazy danych.

Właśnie w taki sposób większość stron internetowych trafia do indeksu wyszukiwarki Google. Jednak ten proces można przyspieszyć, zgłaszając stronę poprzez Google Search Console i przesyłając mapę witryny.

Czy można zablokować Googlebotowi dostęp do strony?

Nie wszystkie adresy URL w obrębie witryny muszą znaleźć się w indeksie wyszukiwarki. Niektóre zasoby są prywatne, inne nie mają znaczenia dla SEO i dla użytkowników, dlatego nie warto pozwalać Googlebotowi na ich indeksowanie.

Aby zablokować dostęp do niektórych treści, można wykorzystać plik robots.txt lub dyrektywę noindex. Przykładem tego, co warto zablokować są koszyk i panel do logowania.

Googlebot – podsumowanie

W dzisiejszym wpisie wyjaśniliśmy, czym jest i do czego służy Googlebot. To podstawowe narzędzie wyszukiwarki, dzięki któremu strona internetowa może zostać sprawdzona, sklasyfikowana, dodana do indeksu, a następnie wyświetlona użytkownikowi na odpowiednią frazę.