Artikel

WebCrawler

WebCrawler (1994) var den første søgemaskine til at indeksere alt sideindhold — ikke blot titler og URL'er. En teknisk milepæl der lagde grunden for moderne tekstsøgning.

Sidst opdateret:

WebCrawler

I april 1994 lancerede Brian Pinkerton — studerende på University of Washington — en søgemaskine der ændrede hvad søgning egentlig betød.

Alle søgemaskiner før WebCrawler, inklusiv de tidlige websøgemaskiner, indexerede primært titler, URL’er og korte metadata.

WebCrawler indexerede al tekst på en webside.

Det lyder simpelt nu. I 1994 var det en tektonisk ændring.

Hvad full-text indexering betød

Før WebCrawler søgte du i hvad siden hed.

Med WebCrawler søgte du i hvad siden indeholdt.

Det betød at en side om “fuglekasse-bygning” ville dukke op, selvom ordet ikke stod i titlen — blot fordi det stod i teksten. Pludselig var søgningen langt mere nyttig.

WebCrawler indexerede en relativt lille del af nettet i 1994 — det var en studenterprojekt med begrænsede serverressourcer. Men princippet var rigtigt.

Vækst og opkøb

WebCrawler voksede hurtigt i popularitet. I 1995 blev den opkøbt af AOL — på det tidspunkt en af de dominerende internetudbydere i USA.

AOL brugte WebCrawler som søgeteknologi bag deres portal. Da AOL og andre portaler tabte terræn til Google, faldt WebCrawler tilsvarende.

WebCrawler har skiftet ejer adskillige gange og eksisterer i 2026 kun som en forældet portal uden reel søgefunktion.

WebCrawler i SEO-historisk kontekst

WebCrawler er et vigtigt punkt i SEO-historien fordi full-text indexering skabte et nyt problem:

Hvis alt sideindhold indexeres, kan man manipulere rangeringen ved at gentage søgeord.

Keyword-stuffing som SEO-taktik var et direkte svar på WebCrawlers og AltaVistas full-text indexering. Du kan ikke fylder et filnavn med søgeord. Men du kan fylde en webside.

Det problem, som WebCrawler og AltaVista skabte, var det problem Google løste med PageRank.

Se AltaVista og de tidlige søgeværktøjer for den fulde sammenhæng.

Sidst opdateret: marts 2026. Denne artikel er en del af Stegger.dk’s SEO-ordbog.

Del af: Oversigt over søgemaskiner →

Andre artikler i samme emne

Relaterede begreber

Emne Oversigt over søgemaskiner Fra WebCrawler og Lycos til Google, DuckDuckGo og Perplexity — alle søgemaskiner samlet: nuværende, historiske og AI-drevne. Hovedguide Søgemaskiner Alt om søgemaskiner: fra de tidlige webkataloger og Googles dominans til AI-drevet søgning — historien, teknologien og fremtiden. Artikel Lycos Lycos opstod fra Carnegie Mellon University i 1994 og var i perioden 1996-2000 en af verdens mest besøgte websites — et symbol på dot-com-ærens høje og fald. Artikel Excite Excite var en stor portal og søgemaskine i 1990'erne — grundlagt på Stanford, konkursramt i 2001, og mest husket for at have afvist at købe Google for $750.000. Artikel AltaVista — Søgemaskinen der skabte SEO AltaVista (1995) var den første søgemaskine til at indeksere hele internettets tekst-indhold — og dermed den søgemaskine der skabte SEO-manipulationen Google måtte løse. Hovedguide Internettets historie — Fra ARPANET til World Wide Web Internettets udvikling fra ARPANET og TCP/IP til World Wide Web og de første søgemaskiner — historien der skabte SEO. Emne Tidlige søgeværktøjer — Fra Archie og Gopher til World Wide Web Fra Archie og Gopher til World Wide Web og Mosaic — historien om de første forsøg på at finde information på internettet. Artikel Archie — Verdens første internetsøgemaskine Archie (1990) var verdens første internetsøgemaskine — den indekserede filnavne på anonymous FTP-servere og satte standarden for al søgning siden.

Ofte stillede spørgsmål

Hvornår blev WebCrawler lanceret?
WebCrawler blev lanceret i april 1994 af Brian Pinkerton som student-projekt ved University of Washington. Det var den første offentligt tilgængelige søgemaskine der indexerede fuldt sideindhold.
Hvad var WebCrawlers tekniske nyskabelse?
Alle søgemaskiner før WebCrawler — Archie, Gopher's Veronica, de tidlige websøgemaskiner — indexerede kun titler, filnavne eller korte beskrivelser. WebCrawler indexerede al tekst på en webside. Det betød at brugeren kunne søge i det faktiske indhold, ikke blot metadata.