Hva er Googlebot?

Googlebot, som navnet antyder, er et automatisert program som indekserer nettsteder for inkludering i Googles søkeindeks. Programvaren skanner stadig på nettet etter nye og oppdatert innhold på tvers av mer enn én billion unike sider indeksert av søkemotoren Google fra datoen for offentliggjøring. Når ny eller oppdatert innhold blir oppdaget, skaper Googlebot en kopi av siden som er lagret på Googles servere, slik at søkemotoren til å raskt bruke Googles søkealgoritme når en bruker utfører et søk.

Historie

Google introduserte Googlebot i 2000 for å mer effektivt indeksere Web. Gjennom det siste tiåret, har Google forbedret Googlebot å takle den raske veksten av Internett. Blant de mange forbedringer, er Googlebot nå i stand til parsing nettstedet data for å presentere aktuelle søkeresultater rike med informasjon som gjelder til nettstedet. For eksempel trekker Googlebot nettstedet seksjoner i indeksen, slik at Googles søkeresultater å vise direkte koblinger til ulike nettstedet seksjoner.

Funksjon

Googlebot indekserer Internett ved å følge hyperkoblinger på et nettsted. Når Googlebot kommer på en nettside, den indekserer tekst og bilder funnet på den siden som fortsetter gjennom nettstedet koblingen struktur, til slutt finne seg selv på eksterne nettsteder gjennom lenker som kobler det til andre steder på nettet. Googlebot algoritmer trekker ut en rekke data fra nettsteder, inkludert utgivelsesdato, forfatter, nettside seksjoner, bilder, adresseinformasjon og mer. Mye av den ekstraherte data vises på Google søkeresultatsider, og gir kontekst til dine spørsmål.

problemer

Siden Googlebot laster ned en fullstendig kopi av hver besøkt nettstedet, inkludert tekst og bilder, har noen klaget den bruker en høy båndbredde. De fleste Web-vertene tildele en begrenset båndbredde per måned og overflødig bruk av båndbredden er ladet til webmaster på en per-GB basis. Dette problemet kan løses ved å benytte Google Webmaster Tools, en tjeneste som lar deg sette krype grenser for Googlebot.

Webmasters

Som webmaster, er det en rekke måter å samhandle med Googlebot. Den mest grunnleggende måten å kontrollere hva Googlebot kan indeksere er å konfigurere en utelukkelse roboter fil som instruerer Googlebot å ekskludere filer eller kataloger når de indekserer nettstedet ditt. Webmasters kan også raskt forbedre indeksering ytelsen ved å sende inn et områdekart ved hjelp av Googles verktøy for nettredaktører. Verktøy for nettredaktører tjenesten gir også en rekke andre funksjoner, inkludert muligheten til å se ditt nettsted som det er sett av Googlebot og gass indeksering priser hvis for mye båndbredde som brukes av Googlebot.