Kort sagt: Crawling är automatisk genomgång av URL:er av en robot som laddar innehåll och följer länkar. För sökmotorer föregår all eventuell indexering av en sida.
Så använder jag crawling (webbgenomsökning) i praktiken
Jag närmar mig crawling (webbgenomsökning) genom att börja med det enklaste testet och gå vidare till dyrare diagnostik. Först försöker jag återskapa problemet, skilja ett innehållsfel från ett mallfel och ta reda på hur många adresser det påverkar. Jag lanserar åtgärden i ett litet urval, kontrollerar status och interna länkar och utökar först därefter.
Vad du bör se upp med
En teknisk lösning får inte dölja svagt innehåll. Crawling (webbgenomsökning) kan undanröja ett hinder, men kan inte skapa en anledning för en person att besöka eller lita på en sida. Därför bedömer jag en åtgärd tillsammans med URL:ens roll, interna länkning och nästa steg.
Frågor inför beslutet
- Vad returnerar servern exakt, och vad ser en person på en viktig URL?
- Är det ett isolerat fel eller ett mönster i en gemensam mall?
- Vilken påverkan har det på synlighet, användbarhet eller konvertering?
- Hur testar vi förändringen före en bred utrullning?