Informationsbeschaffung im Internet

Decken reale Suchdienste das ganze Web ab?

Viele der Suchdienste mit horizontalen Dokumentenkollektionen wie OmniSearch versuchen, einen möglichst lückenlosen Querschnitt durch alle Themengebiete im Internet anzubieten. Gibt es einen Suchdienst, der ausnahmslos alle Dokumente im Index bereitstellt? Die Antwort: Nein! Es gibt immer Seiten, die sich dem Zugriff durch einen Web-Roboter entziehen. Mögliche Gründe werden wir nachfolgend erläutern. Zunächst aber eine wichtige Konsequenz aus dieser Feststellung: Wir müssen davon ausgehen, dass unterschiedliche Suchdienste auch über einen unterschiedlichen Index verfügen. Das heisst: Webseiten, die mit dem einen Suchdienst auffindbar sind, können mit einem anderen nicht gefunden werden. Also kann man durchaus versuchsweise den Suchdienst wechseln, falls man bei einer Recherche ganz und gar nicht weiterkommt.