Wat is het verschil tussen een zoekmachine en een directory?

Directories zoals The Open DIrectory Project, Yahoo en Looksmart bieden gebruikers de mogelijkheid een zoekopdracht te geven of door de database te navigeren op basis van een categorisering van de content. Dergelijke categorieen worden altijd door mensen bijgehouden, waardoor de kwaliteit van de gevonden websites vaak beter is. Echter, directories nemen vaak niet meer dan 1 pagina (doorgaans de homepage) van een website op, waardoor de hoeveelheid informatie niet te vergelijken is met de hoeveelheid informatie in de database van een zoekmachine.

Zoekmachines of spider zoekmachines kennen geen menselijke beinvloeding bij het samenstelling van de database met informatie. Doorgaans wordt gebruik gemaakt van automatische programma´s (spiders of wanderers) die continu het internet afspeuren naar nog onbekende websites. Deze programma´s gaan pagina voor pagina, op basis van de aanwezige linkstructuur, het hele internet af waarbij alle informatie wordt opgeslagen in de database.

Hoewel er dus duidelijke verschillen zijn tussen een zoekmachine en een directory bestaan er in de praktijk vele samenwerkingsverbanden tussen de diverse aanbieders. Zo maken veel zoekmachines bij het bepalen van zoekresultaten gebruik van de data uit directories of andere zoekmachines.