Der AltaVista Spider Mercator (Früher Scooter) stellt den Suchmaschinen-Index
zusammen.
Mercator durchsucht das Web, übergibt seine gesammelten Daten, die schon
während des Sammelns nach gewissen Kriterien gefiltert werden, an NI2, die
Software, die für die Indexierung der Dokumente zuständig ist. Dort
wird jedes Wort, und jede Seite entsprechend zugeordnet und verzeichnet. Der Index
registriert die Häufigkeit von Wörtern in einem Dokument. Dabei ebrücksichtigt
er auch ihre unterschiedliche Schreibweisen, ihre Platzierungen innerhalb des
Dokumentes, und eine Reihe weiterer Faktoren. Es werden dabei auch Wörter
in nicht-lateinischen Buchstaben erfasst und in äquivalente Buchstaben umgewandelt.
Die Technik
Um seine globalen Index bereitzustellen, benutzt AltaVista über 350 Alphaserver
mit 2,5 Terabytes RAM und 67 Terabytes Plattenspeicher.
Das @-web Verzeichnis der wichtigsten Suchmaschinen mit URL zum Anmelden neuer
Webseiten.
Webverzeichnisse und Metasucher: Suchmaschinenverzeichnis
03.10.2002
Seitenbeginn
