Hvordan kontrollere en Google Bot

Googlebot er algoritmisk verktøy som brukes av Google til å indeksere nettet. Programmet skanner Internett for ny og oppdatert innhold, laste ned alt den finner på Google-indeksen, slik at brukerne raskt kan søke i Google database for nettsteder som oppfyller sine søk. Webmasters kan kontrollere hvordan Googlebot indekser deres nettside i en rekke måter. Den enkleste måten å samhandle med Googlebot er å implementere en roboter utestenging fil på nettstedet ditt som instruerer Googlebot å utelukke visse filer eller mapper fra indeksering. Du kan også styre Googlebot ved hjelp av Google Webmaster Tools, en tjeneste som lar deg throttle indeks priser og sende inn et områdekart for mer effektiv indeksering.

Bruksanvisning

Robots Exclusion File

1 Klikk "Start," type "Notisblokk" i søkeboksen nederst i menyen, og trykk deretter på "Enter".

2 Kopier og lim inn følgende kode for å danne grunnlaget for utelukkelse roboter filen:

Bruker agent: *

3 Deaktiver indeksering av visse kataloger eller filtyper av Googlebot og andre søkemotorer ved å modellere koden din etter følgende eksempler. Hver kommando skal legges til, ett per linje, etter den første "User-Agent: *" kode:

Disallow: / musikk /

Forby: /*.gif$

4 Klikk på "File" og velg "Lagre som". Lagre filen som "robots.txt", og laste det opp til rotkatalogen på ditt nettsted. Googlebot og andre robotsøkeprogrammer vil følge instruksjonene som gis av denne filen.

Google Webmaster Tools

5 Gå til Google Webmaster Tools (se referanser) og logg inn med din Google-konto legitimasjon.

6 Klikk "Legg til et nettsted."

7 Klikk på "Last ned denne HTML-filen for bekreftelse" for å lagre filen på datamaskinen, og deretter laste opp filen til rotkatalogen på nettstedet ditt, og klikk "Bekreft" for å bekrefte at du er eieren av nettstedet.

8 Velg ditt nettsted fra "Sites" delen.

9 Velg "Innstillinger" fra "Configuration" i venstre sidebar.

10 Klikk på alternativknappen ved siden av "Set tilpasset krype rate" og justere glidebryteren i henhold til dine crawl rente preferanser.

11 Velg "Sitemaps" fra "Configuration" i venstre sidebar.

12 Klikk på "Send en sitemap" -knappen for å lagre en sitemap beliggenhet med Google som Googlebot kan bruke til å raskt indeksere ditt nettsted.