Du har nettopp publisert en ny nettside. Den ser bra ut, innholdet er på plass, og du deler lenken med kollegaene dine. Men når du søker etter bedriften din på Google, dukker siden ikke opp. Ikke på side 1, ikke på side 5 - ingen steder. Hva skjedde?
Svaret ligger i hvordan søkemotorer fungerer. Google finner ikke nettsiden din automatisk bare fordi den eksisterer. Den må oppdages, forstås og vurderes som relevant nok til å vises. Denne prosessen skjer i tre steg: crawling, indeksering og rangering.
Hvordan fungerer søkemotorer - de tre stegene
Tenk på Google som et gigantisk bibliotek. Men i stedet for at bøkene blir levert til biblioteket, må Google selv dra ut og finne dem. Det skjer gjennom tre adskilte prosesser som bygger på hverandre.
Crawling er det første steget. Google sender ut små programmer kalt roboter (eller "spiders") som beveger seg rundt på internett ved å følge lenker fra side til side. Når en robot lander på en nettside, leser den innholdet og følger alle lenkene den finner videre til nye sider. Slik sprer robotene seg utover nettet, side for side, lenke for lenke.
Indeksering er det andre steget. Når en robot har crawlet en side, sender den informasjonen tilbake til Google. Der blir innholdet analysert og lagret i en enorm database - Googles indeks. Google prøver å forstå hva siden handler om: hvilke ord som brukes, hvilken struktur siden har, og hvordan den relaterer seg til andre sider. Bare sider som er lagret i indeksen kan dukke opp i søkeresultatene.
Rangering er det tredje og siste steget. Når noen skriver et søk i Google, går søkemotoren gjennom indeksen sin og velger ut hvilke sider som skal vises - og i hvilken rekkefølge. Her vurderer Google hundrevis av faktorer, men tre av de viktigste er relevans (matcher innholdet det brukeren søker etter?), brukervennlighet (er siden rask, mobilvenlig og enkel å navigere?) og troverdighet (har siden og nettstedet et godt rykte?). Du kan lese mer om dette i artikkelen om hvordan Google rangerer nettsider.
Sjekk om Google har funnet sidene dine
Det finnes en enkel måte å sjekke hvilke av sidene dine Google faktisk kjenner til. Åpne Google og skriv inn:
site:dittdomene.no
Erstatt "dittdomene.no" med ditt faktiske domene. Google viser deg da alle sider fra nettstedet ditt som ligger i indeksen. Denne listen gir deg nyttig innsikt:
- Hvis viktige sider mangler, har Google enten ikke funnet dem eller valgt å ikke indeksere dem
- Hvis sider du har slettet fortsatt dukker opp, har ikke Google oppdatert indeksen sin ennå
- Hvis du ser færre sider enn forventet, kan det være problemer med hvordan nettstedet ditt er strukturert
Prøv det med ditt eget nettsted akkurat nå. Antallet resultater gir deg et godt utgangspunkt for å forstå hvor synlig du faktisk er.
Bruk Google Search Console for å påvirke prosessen
Du trenger ikke bare sitte og vente på at Google skal finne sidene dine. Google tilbyr verktøy som gir deg direkte innsikt og kontroll over hvordan nettstedet ditt blir behandlet.
Google Search Console er det viktigste verktøyet for dette. Det er gratis, og det lar deg gjøre tre ting som virkelig betyr noe:
- Se indekseringsstatus - du får en komplett oversikt over hvilke sider Google har indeksert, og hvilke som har blitt avvist (og hvorfor)
- Be om indeksering - har du publisert en ny side eller oppdatert en eksisterende? Du kan legge inn URL-en direkte i Search Console og be Google om å crawle den på nytt. I stedet for å vente dager eller uker, kan siden bli indeksert innen timer
- Identifisere problemer - Search Console varsler deg om feil som hindrer crawling og indeksering, for eksempel sider som returnerer feilkoder eller er blokkert for roboter
For å be om indeksering av en spesifikk side, bruker du "URL-inspeksjon"-verktøyet øverst i Search Console. Lim inn URL-en, vent på statusrapporten, og klikk "Be om indeksering" hvis siden ikke allerede er indeksert.
Hjelp Google med å crawle nettstedet ditt effektivt
Googles roboter har begrenset tid på hvert nettsted. Det betyr at strukturen din påvirker hvor mange sider som blir oppdaget. Her er de mest konkrete tiltakene du kan gjøre:
- Intern lenking - sørg for at alle viktige sider er lenket til fra andre sider på nettstedet ditt. En side uten innkommende lenker er nesten usynlig for Google
- XML-sitemap - dette er en fil som lister opp alle sidene du vil at Google skal kjenne til. Den fungerer som et kart robotene kan bruke. Du kan lese mer om hvordan du lager et XML-sitemap
- robots.txt - denne filen forteller Googles roboter hvilke deler av nettstedet de har lov til å crawle. Feil konfigurasjon her kan blokkere viktige sider. Artikkelen om robots.txt og noindex forklarer hvordan du setter dette opp riktig
- Rask lastetid - trege sider bremser crawlingen. Jo raskere sidene dine laster, jo flere rekker Google å besøke
Disse tiltakene handler om å gjøre jobben enklere for Google. Når robotene finner, forstår og stoler på innholdet ditt, øker sjansene for at sidene dine rangerer høyt. Vil du forstå crawling og indeksering i enda mer detalj, har vi en egen artikkel om crawling og indeksering.
Fra teori til praksis
Nå vet du hvordan søkemotorer fungerer og hva som skjer bak kulissene når noen googler noe. Men å vite hvordan det fungerer er bare starten. Den virkelige verdien kommer når du bruker denne kunnskapen til å gjøre konkrete endringer på ditt eget nettsted.
I SEO-kurset går vi gjennom hvordan du setter opp Google Search Console steg for steg, hvordan du bygger en intern lenkestruktur som hjelper Google med å finne de viktigste sidene dine, og hvordan du analyserer indekseringsrapporter for å finne og fikse problemer som holder sidene dine ute av søkeresultatene.
