Sökmotorer arbetar i tre steg: crawlning hittar sidor, indexering lagrar dem och rankning visar de mest relevanta resultaten för varje sökning.
Varje gång du söker efter något använder du ett system som redan har besökt miljontals sidor, sorterat dem och bestämt vilka som svarar bäst på din fråga. Men hur går det till? Vad händer mellan att du skriver din sökning och att du får resultat tillbaka?
Sökmotorer har tre uppgifter. De hittar sidor som finns på internet. De analyserar och lagrar vad sidorna handlar om. Och när någon söker visar de de sidor som bäst matchar det personen letar efter. De tre stegen heter crawlning, indexering och rankning.
Så hittar crawlning sidor
Innan en sökmotor kan visa en sida i resultaten måste den veta att sidan finns. Det är där crawlningen kommer in. En crawler (även kallad bot eller spindel) är ett automatiskt program som rör sig över webben och följer länkar från en sida till en annan.
När du lanserar en ny webbplats dyker den inte automatiskt upp i sökresultaten. Sökmotorns crawler måste hitta den först. Crawlare hittar sidor på två sätt. De följer länkar från sidor de redan har besökt. Om en annan webbplats länkar till din sida hittar crawlaren den så småningom genom länken. De läser också sitemaps, filer som du kan skicka in och som listar alla sidor på din webbplats. Läs mer om hur du skapar en sitemap för bättre crawlning.
När en crawler hittar en sida rankar den den inte direkt och visar den inte i resultaten. Den noterar bara att sidan finns. Sedan går crawlaren vidare till andra sidor och matar hela tiden sökmotorn med nya och uppdaterade sidor.
Crawlbudgeten spelar roll
Sökmotorer har gränser för hur många sidor de kan crawla på din webbplats under en viss tid. Det kallas crawlbudget. En stor webbplats med tusentals sidor får kanske inte alla sidor crawlade under samma vecka. Långsamma webbplatser slösar crawlbudget eftersom crawlaren lägger tid på att vänta på att sidor ska laddas i stället för att gå vidare genom webbplatsen. En snabb, välorganiserad webbplats hjälper crawlaren att ta sig igenom sidorna effektivt.
Så ordnar och lagrar indexeringen information om sidor
När en crawler har hittat en sida är nästa steg indexering. Indexering är arbetet med att analysera sidan och lagra information om den i en enorm databas. Tänk dig att indexeringen är som att bygga en bibliotekskatalog. Bibliotekarien ställer inte bara boken på en hylla. Hen läser den, analyserar vad den handlar om och skapar en post som hjälper andra att hitta den senare.
När en sida indexeras analyserar sökmotorn innehållet, rubrikerna, sökorden och strukturen. Den tittar på hur snabbt sidan laddas, om den fungerar på mobila enheter och vilka andra sidor som länkar till den. All den informationen lagras i indexet.
Inte alla sidor indexeras på samma sätt. Vissa sidor kan uteslutas från indexeringen om de blockeras av en robots.txt-fil eller har en noindex-tagg. Sidor med mycket lite unikt innehåll eller sidor som är för långsamma kommer kanske inte heller med i indexet. En sida kan crawlas utan att indexeras. Läs vår guide om varför vissa sidor inte rankar bra för att förstå indexeringsproblem bättre.
Indexering sker i steg
När en sida har crawlats dyker den inte upp i sökresultaten direkt. Indexeringen kan ta dagar eller veckor beroende på sidan och webbplatsen. Nya sidor kan indexeras snabbare eftersom sökmotorerna vill hitta färskt innehåll. Sidor på webbplatser som länge har publicerat bra innehåll indexeras ofta snabbare än sidor på nya webbplatser.
Så avgör rankningen vilka sidor som visas först
När någon skriver en sökning visar sökmotorn inte alla sidor i indexet som matchar orden. I stället visar den de sidor den tror är mest relevanta, mest användbara och mest pålitliga. Det är rankning. Sökmotorn tittar på över 200 olika signaler för att avgöra vilka sidor som ska komma först, vilka som ska komma som nummer två och vilka som kanske inte visas alls.
Vissa av signalerna finns på din sida. Orden du använder, hur du strukturerar innehållet, hur snabbt sidan laddas och om den fungerar på mobilen påverkar alla din placering. Andra signaler kommer utifrån. Hur många andra webbplatser som länkar till din sida, hur människor använder din sida när de hittar den och webbplatsens samlade rykte spelar också in.
En viktig signal är sökavsikten. Om någon söker efter ”hur man lagar en droppande kran” letar sökmotorn efter sidor som förklarar hur man gör det, inte sidor som försöker sälja reparationssatser. Sökmotorn har lärt sig vad människor faktiskt vill ha när de skriver den frasen och visar sidor som matchar den avsikten. Läs mer om sökavsikt och vad människor faktiskt vill ha.
Rankningen ändras hela tiden
Din placering är inte fast. Sökmotorerna uppdaterar sina rankningsalgoritmer regelbundet. Ibland ändras placeringarna för att sökmotorn justerar sitt system. Ibland ändras de för att konkurrenter publicerar bättre innehåll. Ibland blir din egen sida bättre och klättrar uppåt. Att följa din placering över tid hjälper dig att förstå om ditt SEO-arbete fungerar. Läs mer om varför dina konkurrenter kanske rankar högre och vad du kan göra åt det.
Hela kretsloppet
De här tre stegen sker inte bara en gång. Crawlare besöker sidor om och om igen och letar efter ändringar och nytt innehåll. När du uppdaterar en sida hittar crawlarna uppdateringarna och sidan indexeras om. Rankningsalgoritmen räknar hela tiden om placeringarna utifrån ny data.
Hur snabbt kretsloppet går beror på webbplatsens auktoritet. Sidor på etablerade webbplatser med lång historia av bra innehåll crawlas och indexeras om oftare. Nya webbplatser får kanske vänta längre innan ändringar syns i resultaten. Därför är SEO ett långsiktigt arbete. Du kan inte publicera en sida i dag och räkna med att den rankar i morgon. Systemet måste hitta den, indexera den och utvärdera den innan den syns i resultaten. För en komplett strategi för nybörjare kan du följa vår SEO-plan för nybörjare.
Vanliga frågor
Hur ofta crawlar sökmotorer min webbplats?
Hur ofta beror på webbplatsens ålder och auktoritet. Nya webbplatser crawlas kanske en gång i veckan eller mer sällan. Etablerade webbplatser med mycket trafik crawlas flera gånger om dagen. Du kan se crawlaktiviteten i ditt Google Search Console-konto under rapporten ”Crawl Stats”. Om du vill att crawlarna ska märka uppdateringar snabbare kan du skicka in URL:en direkt i Google Search Console. Med WEMASY:s webbplatsbyggare kan du ställa in det direkt på din webbplats.
Kan jag få min sida indexerad snabbare?
Ja, några saker hjälper. Se till att din sida går att hitta genom att skicka in en sitemap till Google Search Console. Förbättra webbplatsens hastighet så att crawlarna lägger mindre tid på att vänta och mer tid på att hitta nya sidor. Länka till nya sidor från din startsida eller andra sidor med hög auktoritet på din webbplats. Och publicera nytt innehåll regelbundet så att sökmotorerna kollar din webbplats oftare.
Vad är skillnaden mellan crawlning och indexering?
Crawlning är när sökmotorn besöker en sida och läser den. Indexering är när sökmotorn lagrar information om sidan så att den kan visas som sökresultat senare. En sida kan crawlas utan att indexeras om den har mycket lite unikt innehåll eller om du säger åt sökmotorn att inte indexera den.
Garanterar en sitemap att mina sidor indexeras?
Nej. En sitemap hjälper crawlaren att hitta dina sidor snabbare, men den tvingar inte Google att indexera dem. Sökmotorn avgör fortfarande om varje sida är användbar och värd att lagra i indexet. En sitemap hjälper men är ingen garanti.
Kan jag förhindra att min sida indexeras?
Ja. Du kan lägga till en noindex-tagg i sidans header, som säger åt sökmotorerna att inte ta med den i resultaten. Du kan också blockera hela crawlningen med robots.txt. Men var försiktig med det, eftersom det betyder att din sida inte syns i sökresultaten även om innehållet annars är bra och människor vill hitta det.
Indexeras mobilversionen och datorversionen separat?
Sökmotorer använder numera mobile-first-indexering, vilket betyder att de främst använder mobilversionen av din sida för att indexera och ranka den. Om din mobilsida saknar innehåll som finns i datorversionen kommer det innehållet inte att indexeras. Se till att din mobilwebbplats har samma kvalitet och innehåll som datorversionen.