Es gibt Bereich im Web, die für google und andere Suchmaschinen nicht erreichbar sind. Dazu gehören z.B. das deepweb oder das darknet. Im Falle des deepweb handelt es sich um z. B. Kataloge oder Datenbanken, deren Inhalt explizit von der Indexierung durch google und Co. ausgenommen ist.

Aber die Informationsfülle im deepweb ist groß und relevant. Zugriff erhält man über spezielle Suchmaschinen, die z.B. von Universitäten betrieben werden.

Wer Interesse hat, sich diesem Thema zu nähern, findet bei nachfolgenden Adressen einen Einstieg in die weiten des Wissensnetzes:

• scirus.com - Suchmaschine die aus 440 Mio. wissenschaftliche Websites zugreift
• oaister.worldcat.org - Suchmaschine die auf Bibliotheksbestände zugreift
• Database als Suchbegriff bei google
  
• deepwebresearch.info - Grundlageninformationen

Achso, daß darknet ist übrigens ein Teil im Netz, der nur dem Zugriff erlaubt, der einer bestimmten geschlossenen Gruppe (technisch) angehört. Die Daten werden dort verschlüsselt übertragen und gespeichert. Im darknet finden sich geheime, regimekritische "Aktivitäten" sowie illegale oder zweifelhafte Daten und deren Nutzer. 

YaCy ist eine freie Suchmaschinensoftware. Mit der Software lässt sich ein ein eigenes Suchportal errichten, man kann „sein Intranet“ indexieren oder andere Daten um eine Suchfunktion erweitern.

YaCy kann als Einzelinstallation betrieben werden. Im Peer-to-Peer Betrieb soll es als dezentrales Verezeichnis die Informationsfreiheit gewährleisten, im Gegensatz zu den etablierten Suchmaschinen, die zensiert, gewichtet oder durch Userverhalten im Ergebnis verzerrt sein können.