www.milospavic.dk › ordbog › hvad-er-robots-txt
Hvad er robots.txt?
Robots.txt er en tekstfil der fortæller søgemaskiner hvilke dele af en hjemmeside de må og ikke må crawle.
www.milospavic.dk › ordbog › hvad-er-crawlbudget
Hvad er crawlbudget?
Crawlbudget er det antal sider Googlebot crawler på din hjemmeside inden for en given tidsperiode.
Hvad påvirker dit crawlbudget?
Google har begrænsede ressourcer og kan ikke crawle uendeligt mange sider på alle hjemmesider. Dit crawlbudget afhænger af dit domænes autoritet og sidens størrelse. På et lille site med høj autoritet crawler Google næsten alt. På et stort site med mange lavkvalitetssider risikerer vigtige sider at blive overset. Du optimerer dit crawlbudget ved at blokere irrelevante sider via robots.txt, rette brudte links, undgå redirect-kæder og sikre at din sitemap kun indeholder de sider du ønsker indekseret.
Eksempel på crawlbudget
En webshop med 50.000 produktsider opdager at Googlebot bruger halvdelen af crawlbudgettet på filtrerede søgesider uden SEO-værdi. Ved at blokere disse i robots.txt frigives budget til at crawle nye og opdaterede produktsider hurtigere.
Hvorfor er crawlbudget vigtigt?
- Afgørende for store sites med mange sider
- Sikrer at nye og vigtige sider opdages hurtigere
- Spildt crawlbudget forsinker indeksering af vigtigt indhold
Relaterede termer
www.milospavic.dk › ordbog › hvad-er-en-sitemap
Hvad er en sitemap?
En sitemap er en fil der fortæller søgemaskiner hvilke sider på en hjemmeside der findes og skal indekseres.
www.milospavic.dk › ordbog › hvad-er-teknisk-seo
Hvad er teknisk SEO?
Teknisk SEO er optimering af en hjemmesides tekniske fundament, så søgemaskiner kan crawle, indeksere og rangere indholdet korrekt.