ff-webdesign Lexikon: Robot

Im ff-webdesigner Lexikon erklären wir Ihnen die wichtigsten Begriffe rund ums Webdesign.
Sie denken, hier fehlt noch eine Definition? Mailen Sie uns!

INDEX – A B C D E F G H I J K L M N O P Q R S T U V W X Y Z

Robot (oder auch Crawler, Spider, Bot) ist im Webdesign ein von einer Suchmaschine ausgeschicktes automatisches Indizierungsskript. Jeder Robot verfolgt das gleiche Ziel: Inhalte von Homepages einlesen, Links verfolgen und an die Suchmaschine melden. Sie sind dir Grundlage einer jeden echten Suchmaschine und deren Suchergebnisse. Die durch den Robot ermittelten Daten werden durch den Ranking-Algorhythmus der jeweiligen Suchmaschine zu den Trefferlisten kombiniert. Gute Webdesigner ermöglichen es den Robots, jeden wichtigen Teil einer Homepage schnell, einfach und komplett einlesen zu können, genauso, wie geschützte Bereiche vor den Robots versteckt werden. Bei dynamischen Webseiten ist es oft wichtig, statische Versionen für Robots parallel zu betreiben. Es gibt auch andere Arten von Robots, z.B. Email-Adressen-Sniffer.