Unter dem Begriff Spider (Robots, Crawler) versteht man Softwareprogramme, die von Suchmaschinen eingesetzt werden und die das Web automatisch durchforsten, Daten sammeln und Webseiten indizieren.
Spider orientieren sich dabei an den vorhandenen Hyperlinks und versuchen so, sich von Seite zu Seite vorzutasten. Dabei wird die Seite gescannt, der Inhalt bewertet und eingeordnet.
Beinahe alle Suchmaschinen bieten die Möglichkeit, Webseiten dort manuell anzumelden. Diese Anmeldung entspricht einer Aufforderung an den Spider, auf der entsprechenden Webseite vorbei zu kommen und diese zu indizieren.
Diese theoretische Möglichkeit kann man in der Zwischenzeit jedoch getrost vergessen, da sich Suchmaschinen aufgrund der Menge an Daten kaum mehr von außen beeinflussen lassen. Hier hilft meist nur etwas Geduld. Früher oder später wird die Seite automatisch indiziert.
Wenn Ihre Seite auch nach mehreren Monaten noch nicht über Suchmaschinen gefunden wird, sprechen Sie mit uns!
