Kort fortalt: Crawl-budsjett beskriver hvor mange URL-er en søkemotor ønsker og er i stand til å gjennomsøke på et nettsted i løpet av en gitt periode. Det er først og fremst relevant for store eller teknisk problematiske nettsteder.
Slik bruker jeg crawl-budsjett i praksis
Jeg tar for meg crawl-budsjettet fra den enkleste testen mot mer kostbar diagnostikk. Først prøver jeg å gjenskape problemet, skille en innholdsfeil fra en malfeil og finne ut hvor mange adresser den påvirker. Jeg lanserer løsningen på et lite utvalg, kontrollerer status og interne lenker, og utvider først deretter.
Hva du bør være oppmerksom på
En teknisk løsning må ikke skjule svakt innhold. Crawl-budsjettet kan fjerne et hinder, men kan ikke skape en grunn til at noen skal besøke eller stole på en side. Derfor vurderer jeg løsningen sammen med URL-ens rolle, intern lenking og neste steg.
Spørsmål for en beslutning
- Hva returnerer serveren nøyaktig, og hva ser en person på en viktig URL?
- Er dette en individuell feil eller et mønster i en felles mal?
- Hvilken innvirkning har dette på synlighet, bruk eller konvertering?
- Hvordan tester vi endringen før en bred utrulling?