Den dolda (osynliga eller djupa) webben nås inte genom sökmotorer. Istället måste man söka direkt på den webbplats där informationen finns.
Sökmotorerna klarar inte av att söka igenom hela Internet.
Det som inte nÃ¥s via sökmotorer, men ändÃ¥ är tillgängligt via Internet kallas den dolda webben (även kallat den osynliga webben). I vissa fall handlar det ocksÃ¥ om att sökmotorerna inte vill indexera “allt”.
Man brukar räkna med att den största sökmotorn har ungefär 15-20 % täckning.
Dolda webben består bland annat av:
- Olänkade sidor. Sökmotorerna (spindlarna) kan inte nå en sida som inte är länkad.
- Sidor med inloggning. Många webbplatser kräver inloggning trots att innehållet sen är fritt.
- Dolda sidor. Genom enkel html-kod kan man avvisa sökmotorernas indexering.
Dynamiska webbsidor. Informationen finns i databaser och publiceras som svar på en sökfråga. T. ex:
Referensdatabaser
Faktasöktjänster
Turlistor, Vädertjänster
Bibliotekskataloger (undantag: Yahoo har indexerat Open WorldCat, ca 2 milj. titlar)
Dolda webben består också av sidor som inte är indexerade pga resursskäl. Sökmotorerna indexerar olika djupt, ibland kanske bara en eller två kataloger. Då hamnar de andra filerna utanför. Filtyper som kan vara svåra att avläsa t ex Flash eller ljud- och filmfiler utan relevant textmärkning kan också sägas tillhöra den osynliga webben.
Efterhand som Internet utvecklas och vi får nya tjänster och filformat så utvecklas också sökmotorernas kapacitet eller nya tillkommer. Det finns redan tjänster som söker efter och i bloggar, RSS-feeds och Podcasts.
Eva Norling
2005-06-22
