Suchmaschine
nennen sich große Verzeichnisse von
URLs, in denen nach Schlagworten gesucht werden kann und die Ergebnisse als Liste von Links, auf die jeweiligen Anbieter verweisen.
Die Listen, die die Suchmaschinen verwenden (Index / Indizes), werden automatisch von Robots erzeugt. Diese kleinen Programme durchsuchen das
Internet nach bestimmten Suchwörtern (Tags) und speichern die Ergebnisse ab.
Der Speicherbedarf dieser Listen ist gewaltig. Schon 2005 waren beim Suchmaschinen Primus Google, über vier Milliarden Webseiten a ca. 10 KByte indiziert und in über 30 Clustern (mit bis zu 2000 Rechnern pro Cluster) gespeichert.