Seerobotsvon seerobots

Mit dem Firefox Plugin Seerobots hat man die Möglichkeit auf einfache Weise herauszufinden, ob die gerade besuchte Webseite durch den Webmaster ggf. für das Crawlen durch Suchmaschinen wie Google oder Bing blockiert wird (Noindex) bzw. ob den Links auf dieser Seite gefolgt oder nicht gefolgt werden soll (Follow/Nofollow). In der Statusbar des Firefox wird nach der Installation bei jedem Seitenaufruf der entsprechende Metatag angezeigt, sofern er im Quelltext der Seite enthalten ist. Darüber hinaus kann man auch ganz einfach per Klick die eventuelle X-Robots-Angabe im HTTP-Header der Webseite überprüfen. Weitere Informationen und Tutorials zum Plugin erhält man unter Seerobots.com...