Overblik over problemer med scanninger
Ved at anvende Morningscores SEO værktøj kan du opleve problemer med scan-funktionen. Her er de mest almindelige årsager til problemer og mulige løsninger.
Denne guide og vores løsningsforslag kræver teknisk viden.
Problem: 401 Unauthorised
Hvis du besøger din hjemmeside og modtager en 401-fejlkode, betyder det, at webcrawleren ikke er autoriseret til at tilgå den ønskede ressource. Det sker typisk, når webcrawleren ikke kan angive gyldige godkendelsesoplysninger, såsom et brugernavn og en adgangskode.
Kort sagt betyder det, at din hjemmeside er beskyttet af en adgangskode, og at webcrawleren ikke har angivet de korrekte loginoplysninger.
Løsning: 401 Unauthorised
Først og fremmest er dette måske ikke et problem. Det er normalt, at nogle sider kræver et login og ikke ønsker, at crawlere besøger dem. I så fald kan du ignorere dette problem.
For at løse problemet kan du tillade en bestemt webcrawlers IP-adresse(r) eller user-agent at få adgang til bestemte dele af hjemmesiden uden et login, eller give webcrawleren særlige login-oplysninger - brugernavn og adgangskode - som den kan bruge til at få adgang til hjemmesiden. Vi understøtter i øjeblikket kun brugerdefinerede implementeringer i disse scenarier, så kontakt os venligst via chatten for mulige løsninger
Vores user-agent er: "Morningscore Bot" (uden "")
Her er et eksempel på, hvordan du tillader vores crawler via din robots.txt-fil:
For en liste over vores crawler-IP'er bedes du kontakte os i chatten.
Problem: 403 Forbidden
En 403-fejlkode betyder, at hjemmesiden ikke tillader vores webcrawler at få adgang til dens sider. Hjemmesider kan blokere for alle webcrawlere, eller den kan blokere for bestemte. Hjemmesidens administrator kan have opsat regler for at blokere webcrawlere fra at få adgang til bestemte sider eller sektioner af hjemmesiden.
Løsning: 403 Forbidden
Du kan rette en 403-fejl ved at give vores webcrawler adgang til din hjemmeside. Det kan du gøre ved at:
tilføje webcrawlerens IP-adresse eller user-agent til hjemmesidens whitelist, som er en liste over IP-adresser eller user-agents, der har tilladelse til at tilgå hjemmesiden.
Vores user-agent er: "Morningscore Bot" (uden "")
Eksempel på, hvordan du tillader vores crawler i din robots.txt-fil:
For en liste over vores crawler-IP'er bedes du kontakte os i chatten.
Hvis du bruger et sikkerhedsplugin, bør du kontrollere, om dette plugin blokerer webcrawleren eller ej, og justere indstillingerne i overensstemmelse hermed.
Du er måske bag en stærk firewall. Det kan være via en DNS-udbyder som Cloudflare.
Din host / plugin på din hjemmeside blokerer baseret på IP-liste / ASN
Alle vores nuværende Morningscore-bots er placeret i ASN AS204287.
Så en rettelse i Cloudflare ville for eksempel være at tillade vores ASN som vist her:
Og så på den side indtaste vores ASN:
Problem: 451 utilgængelig af juridiske årsager
Når vores webcrawler besøger din hjemmeside og modtager en 451-fejlkode, betyder det, at webcrawleren ikke kan få adgang til den ønskede ressource på grund af juridiske årsager. HTTP 451-fejlkoden er en HTTP-statuskode, der er specielt designet til situationer, hvor en hjemmeside er blokeret af en juridisk myndighed.
Kort sagt betyder det, at din hjemmeside er blokeret af regeringen eller en anden juridisk myndighed, og at webcrawleren ikke kan få adgang til den.
Løsning: 451 Utilgængelig af juridiske årsager
Som hjemmesideejer vil du ikke selv kunne løse dette problem, da blokeringen er håndhævet af en juridisk myndighed. Det kan være en god idé at tjekke med de juridiske myndigheder eller konsultere en juridisk ekspert for at forstå årsagen til blokeringen, og hvad du kan gøre for at ophæve den.
Dette er et sjældent problem.
Kontakt os venligst via chatten, hvis du har dette problem.
Problem: 429 For mange anmodninger
Når vores webcrawler besøger din hjemmeside og modtager en 429-fejlkode, betyder det, at du blokerer os, fordi vi har lavet for mange "anmodninger" til din hjemmeside inden for en given tidsperiode. Dette er relateret til en "hastighedsbegrænsning" af trafikken.
Kort sagt betyder det, at din server blokerer os, fordi vi scanner for hurtigt. I virkeligheden scanner vi ikke så hurtigt sammenlignet med lignende værktøjer, så det ser ud til, at kontrollen på din server er meget streng her.
Løsning: 429 For mange anmodninger
Vi arbejder på en løsning på dette problem fra vores side. Dybest set vil vi scanne din hjemmeside langsommere, når vi får denne fejlkode.
Men du kan helt sikkert også løse det på din side. Den, der kontrollerer din server, skal reducere "rate limiting". Du kan fortælle dem om dette specifikke problem, så burde de vide, hvad de skal gøre.
Kontakt os i chatten, hvis du sidder fast.
Problem: Robots.txt-regler
Når vores webcrawler besøger din hjemmeside og bliver blokeret på grund af Robots.txt-regler, betyder det, at du har opsat specifikke instruktioner til webcrawlere i en fil kaldet "robots.txt", som er placeret i din hjemmesides root-folder. Denne fil indeholder regler, der specificerer, hvilke sider eller sektioner af din hjemmeside, der ikke skal crawles eller indekseres af webcrawlere.
Enkelt sagt betyder det, at du har bedt webcrawlere om ikke at besøge bestemte sider eller sektioner på din hjemmeside ved at tilføje dem til Robots.txt-filen.
Løsning: Robots.txt-regler
Du kan løse dette problem ved enten at fjerne disallow-reglen fra Robots.txt-filen eller ved at tilføje vores webcrawlers IP-adresse eller user-agent til hjemmesidens whitelist, som er en liste over IP-adresser eller user-agents, der har adgang til hjemmesiden.
Vores user-agent er: "Morningscore Bot" (uden "")
Eksempel på, hvordan du tillader vores crawler i din robots.txt-fil:
For en liste over vores crawler-IP'er kan du kontakte os i chatten.
Problem: Ugyldigt domæne
Når vores webcrawler forsøger at besøge dit domæne, men af en eller anden grund ikke kan få adgang til det, vil du se denne fejl blive rapporteret.
Løsning: Ugyldigt domæne
Start med at besøge dit domæne i din browser for at tjekke, om der overhovedet er adgang til siden. Hvis det ikke kan lade sig gøre, skal du enten kontakte administratoren af din hjemmeside eller selv fejlfinde på serveren.
Hvis du selv kan få adgang til siden, kan du prøve at køre en ny scanning, da det kan have været en midlertidig fejl. Hvis du stadig modtager denne fejl, bedes du kontakte os i chatten med et screenshot af fejlmeddelelsen.
Denne guide og vores løsningsforslag kræver teknisk viden.
Problem: 401 Unauthorised
Hvis du besøger din hjemmeside og modtager en 401-fejlkode, betyder det, at webcrawleren ikke er autoriseret til at tilgå den ønskede ressource. Det sker typisk, når webcrawleren ikke kan angive gyldige godkendelsesoplysninger, såsom et brugernavn og en adgangskode.
Kort sagt betyder det, at din hjemmeside er beskyttet af en adgangskode, og at webcrawleren ikke har angivet de korrekte loginoplysninger.
Løsning: 401 Unauthorised
Først og fremmest er dette måske ikke et problem. Det er normalt, at nogle sider kræver et login og ikke ønsker, at crawlere besøger dem. I så fald kan du ignorere dette problem.
For at løse problemet kan du tillade en bestemt webcrawlers IP-adresse(r) eller user-agent at få adgang til bestemte dele af hjemmesiden uden et login, eller give webcrawleren særlige login-oplysninger - brugernavn og adgangskode - som den kan bruge til at få adgang til hjemmesiden. Vi understøtter i øjeblikket kun brugerdefinerede implementeringer i disse scenarier, så kontakt os venligst via chatten for mulige løsninger
Vores user-agent er: "Morningscore Bot" (uden "")
Her er et eksempel på, hvordan du tillader vores crawler via din robots.txt-fil:
user-agent: Morningscore Bot
Allow: /For en liste over vores crawler-IP'er bedes du kontakte os i chatten.
Problem: 403 Forbidden
En 403-fejlkode betyder, at hjemmesiden ikke tillader vores webcrawler at få adgang til dens sider. Hjemmesider kan blokere for alle webcrawlere, eller den kan blokere for bestemte. Hjemmesidens administrator kan have opsat regler for at blokere webcrawlere fra at få adgang til bestemte sider eller sektioner af hjemmesiden.
Løsning: 403 Forbidden
Du kan rette en 403-fejl ved at give vores webcrawler adgang til din hjemmeside. Det kan du gøre ved at:
tilføje webcrawlerens IP-adresse eller user-agent til hjemmesidens whitelist, som er en liste over IP-adresser eller user-agents, der har tilladelse til at tilgå hjemmesiden.
Vores user-agent er: "Morningscore Bot" (uden "")
Eksempel på, hvordan du tillader vores crawler i din robots.txt-fil:
user-agent: Morningscore Bot
Allow: /For en liste over vores crawler-IP'er bedes du kontakte os i chatten.
Hvis du bruger et sikkerhedsplugin, bør du kontrollere, om dette plugin blokerer webcrawleren eller ej, og justere indstillingerne i overensstemmelse hermed.
Du er måske bag en stærk firewall. Det kan være via en DNS-udbyder som Cloudflare.
Din host / plugin på din hjemmeside blokerer baseret på IP-liste / ASN
Alle vores nuværende Morningscore-bots er placeret i ASN AS204287.
Så en rettelse i Cloudflare ville for eksempel være at tillade vores ASN som vist her:
Og så på den side indtaste vores ASN:
Problem: 451 utilgængelig af juridiske årsager
Når vores webcrawler besøger din hjemmeside og modtager en 451-fejlkode, betyder det, at webcrawleren ikke kan få adgang til den ønskede ressource på grund af juridiske årsager. HTTP 451-fejlkoden er en HTTP-statuskode, der er specielt designet til situationer, hvor en hjemmeside er blokeret af en juridisk myndighed.
Kort sagt betyder det, at din hjemmeside er blokeret af regeringen eller en anden juridisk myndighed, og at webcrawleren ikke kan få adgang til den.
Løsning: 451 Utilgængelig af juridiske årsager
Som hjemmesideejer vil du ikke selv kunne løse dette problem, da blokeringen er håndhævet af en juridisk myndighed. Det kan være en god idé at tjekke med de juridiske myndigheder eller konsultere en juridisk ekspert for at forstå årsagen til blokeringen, og hvad du kan gøre for at ophæve den.
Dette er et sjældent problem.
Kontakt os venligst via chatten, hvis du har dette problem.
Problem: 429 For mange anmodninger
Når vores webcrawler besøger din hjemmeside og modtager en 429-fejlkode, betyder det, at du blokerer os, fordi vi har lavet for mange "anmodninger" til din hjemmeside inden for en given tidsperiode. Dette er relateret til en "hastighedsbegrænsning" af trafikken.
Kort sagt betyder det, at din server blokerer os, fordi vi scanner for hurtigt. I virkeligheden scanner vi ikke så hurtigt sammenlignet med lignende værktøjer, så det ser ud til, at kontrollen på din server er meget streng her.
Løsning: 429 For mange anmodninger
Vi arbejder på en løsning på dette problem fra vores side. Dybest set vil vi scanne din hjemmeside langsommere, når vi får denne fejlkode.
Men du kan helt sikkert også løse det på din side. Den, der kontrollerer din server, skal reducere "rate limiting". Du kan fortælle dem om dette specifikke problem, så burde de vide, hvad de skal gøre.
Kontakt os i chatten, hvis du sidder fast.
Problem: Robots.txt-regler
Når vores webcrawler besøger din hjemmeside og bliver blokeret på grund af Robots.txt-regler, betyder det, at du har opsat specifikke instruktioner til webcrawlere i en fil kaldet "robots.txt", som er placeret i din hjemmesides root-folder. Denne fil indeholder regler, der specificerer, hvilke sider eller sektioner af din hjemmeside, der ikke skal crawles eller indekseres af webcrawlere.
Enkelt sagt betyder det, at du har bedt webcrawlere om ikke at besøge bestemte sider eller sektioner på din hjemmeside ved at tilføje dem til Robots.txt-filen.
Løsning: Robots.txt-regler
Du kan løse dette problem ved enten at fjerne disallow-reglen fra Robots.txt-filen eller ved at tilføje vores webcrawlers IP-adresse eller user-agent til hjemmesidens whitelist, som er en liste over IP-adresser eller user-agents, der har adgang til hjemmesiden.
Vores user-agent er: "Morningscore Bot" (uden "")
Eksempel på, hvordan du tillader vores crawler i din robots.txt-fil:
User-agent: Morningscore Bot
Allow: /For en liste over vores crawler-IP'er kan du kontakte os i chatten.
Problem: Ugyldigt domæne
Når vores webcrawler forsøger at besøge dit domæne, men af en eller anden grund ikke kan få adgang til det, vil du se denne fejl blive rapporteret.
Løsning: Ugyldigt domæne
Start med at besøge dit domæne i din browser for at tjekke, om der overhovedet er adgang til siden. Hvis det ikke kan lade sig gøre, skal du enten kontakte administratoren af din hjemmeside eller selv fejlfinde på serveren.
Hvis du selv kan få adgang til siden, kan du prøve at køre en ny scanning, da det kan have været en midlertidig fejl. Hvis du stadig modtager denne fejl, bedes du kontakte os i chatten med et screenshot af fejlmeddelelsen.
Opdateret den: 30/01/2024