Von Asimovs Robotergesetzen zu Benders Metall-Arsch: Die witzigsten robots.txt-Files im Web
Die robots.txt-Datei geht auf das Robots-Exclusion-Standard-Protokoll zurück. Die Datei sagt dem Webcrawler von Google und anderen Bots, die das Web durchpflügen, welche Inhalte erfasst und welche nicht erfasst werden sollen. Die robots.txt-Datei wird demnach in der Regel automatisch von Software-Programmen ausgewertet und ist daher im Grunde nicht für die Augen von Menschen bestimmt. Trotzdem machen sich Website-Betreiber immer wieder einen Spaß daraus, ihre robots.txt mit lustigen Texten oder ASCII-Bildchen auszuschmücken.
So witzig kann die robots.txt-Datei sein
Viele dieser versteckten Nachrichten bleiben dem Dateinamen der robots.txt insofern treu, als es sich um Anspielungen an bekannte Roboter handelt. So findet sich der Roboter Bender aus der beliebten Zeichentrickserie Futurama in einer ganzen Reihe von robots.txt-Files. Auch Anspielungen an die von dem Science-Fiction-Autor Isaac Asimov aufgestellten Robotergesetze finden sich beispielsweise bei Yelp und LastFM.
Andere greifen generelle Internet-Phänomene wie Keyboard-Cat auf, während Firmen wie Nike oder Starbucks darin ihr Firmenlogo oder andere Hinweise zum eigenen Unternehmen verstecken. Ebenfalls beliebt sind Hinweise zu offenen Stellen im Unternehmen. Schließlich zeigt das Herumstöbern in der robots.txt auch ein ungewöhnlich hohes Interesse an einer Website.
Ebenfalls interessant:
- Was ist eigentlich die Robots.txt-Datei?
- Was ein SEO über die robots.txt wissen sollte
- t3n SEO-Check: 4 Wege, Google-Rankings zu verhindern
Bitte beachte unsere Community-Richtlinien
Wir freuen uns über kontroverse Diskussionen, die gerne auch mal hitzig geführt werden dürfen. Beleidigende, grob anstößige, rassistische und strafrechtlich relevante Äußerungen und Beiträge tolerieren wir nicht. Bitte achte darauf, dass du keine Texte veröffentlichst, für die du keine ausdrückliche Erlaubnis des Urhebers hast. Ebenfalls nicht erlaubt ist der Missbrauch der Webangebote unter t3n.de als Werbeplattform. Die Nennung von Produktnamen, Herstellern, Dienstleistern und Websites ist nur dann zulässig, wenn damit nicht vorrangig der Zweck der Werbung verfolgt wird. Wir behalten uns vor, Beiträge, die diese Regeln verletzen, zu löschen und Accounts zeitweilig oder auf Dauer zu sperren.
Trotz all dieser notwendigen Regeln: Diskutiere kontrovers, sage anderen deine Meinung, trage mit weiterführenden Informationen zum Wissensaustausch bei, aber bleibe dabei fair und respektiere die Meinung anderer. Wir wünschen Dir viel Spaß mit den Webangeboten von t3n und freuen uns auf spannende Beiträge.
Dein t3n-Team