Der Index einer Suchmaschine wie Google ist eine riesige Datenbank, in der Informationen über die im Web gecrawlten Seiten gespeichert sind. Wenn eine Seite indexiert ist, wurde sie von Suchmaschinen-Crawlern besucht, analysiert und die relevanten Informationen wurden im Index gespeichert, um bei relevanten Suchanfragen angezeigt zu werden.
Nur Seiten, die im Index einer Suchmaschine aufgenommen sind, können auch in den Suchergebnissen dieser Suchmaschine erscheinen. Das Bestreben von Webseitenbetreibern ist es daher meistens, mit ihren Seiten im Index vertreten und somit auffindbar zu sein. Manchmal ist es aber auch strategisch sinnvoll, bestimmte Seiten bewusst aus dem Index fernzuhalten, zum Beispiel, wenn es sich um Duplicate Content handelt.
