Rezept der Woche


Social Media Marketing (SMM) das Online Marketing der Zukunft!

Gestern noch ?Musik von morgen?, sind die Sozialen Netzwerke heute nicht mehr aus unserem Leben weg zu denken. Weltweit mehr als 400 Millionen Internetnutzer kommunizieren täglich über das Web 2.0, die Betreiber von Sozialen Netzwerken frohlocken über das überragende Wachstum. Die Social Media Dienste, allen voran Facebook, sind sehr beliebte Online Plattformen, auf denen die ... [mehr]

AGOF Studie: Suchmaschinen sind ganz oben auf der Beliebtheitsskala!

Dass das Internet aus unserem Leben nicht wegzudenken ist, muss heute niemandem mehr erklärt werden. Surfen & Recherchieren, Chatten & Shoppen gehören zum Alltag Millionen Menschen. Wissen Sie, dass mittlerweile mehr als 44 Millionen Deutsche ab 14 Jahren online sind, davon weit mehr als 31 Millionen sogar seit mehr als drei Jahren und im letzten ... [mehr]

Crawler


Der Crawler, der fleißige Helfer der Suchmaschine

Das englische Wort Crawler ist buchstäblich als „Kriecher“ ins Deutsche zu übersetzen. Im Bereich Internet steht der Begriff Crawler (bzw. Webcrawler) für ein Programm, welches das Internet selbstständig durchsuchen kann. Seinen Namen hat der Crawler der ersten Suchmaschine zu verdanken, die den Namen WebCrawler trug. Die Arbeitsweise des Crawlers ist ein völlig automatisiertes Lesen des gesamten lesbaren Inhalts einer Webseite, Speichern jedes gefundenen Links und anschließendes Aufrufen jeder dieser Links bzw. Verzweigen und Besuchen jeder Webseite, auf die dadurch verwiesen wird.

Wegen deren automatischen Arbeitsweise werden die Crawler auch als „Robots“ (Roboter) bezeichnet. Wegen des wie ein Spinnetz aussehenden Weges, den sie von Webseite zu Webseite zurücklegen, werden sie auch als „Spider“ (Spinnen) bezeichnet.

Crawler setzen an erster Stelle die Suchmaschinen ein, um durch sie im Web nach Webseiten, deren Webseiteninhalte bestimmte Kriterien erfüllen, zu suchen. Somit sind es die Crawler, die im Dienste der Suchmaschinen für sie das Web nach Webseiten, die einen bestimmten Suchbegriff enthalten, durchsuchen und die URL der gefundenen Seiten auch erfassen.

Das Ergebnis der Durchsuchung der Webseiten durch den Crawler ist die Indexierung und Auswertung aller gefundenen und besuchten Webseiten. Dabei wird der Indexierung der Ranking Algorithmus der jeweiligen Suchmaschine zugrunde gelegt. Die einmal von dem Crawler zusammengetragenen Daten können für jedes spätere Suchen verwendet und vor allem von der Suchmaschine bei der Erzeugung ihrer Ergebnislisten benutzt werden. Somit ist der Crawler ein wichtiger Teil der Suchmaschine, da er alle bei ihr eingetragenen (angemeldeten) Webseiten aufrufen, prüfen und sie gegebenenfalls in ihren Index aufnehmen kann.



<< Zurück