robots.txt Recon

PC empfohlen: Für dieses Lab ist ein Browser mit gut sichtbarer Adresszeile angenehmer, weil du gezielt zwischen Seiten und Pfaden wechselst.

Viele Websites besitzen eine Datei mit dem Namen robots.txt. Sie liegt im Hauptverzeichnis einer Website und enthält Hinweise für Suchmaschinen.

Kernidee:
Eine robots.txt schützt nichts. Sie kann nur darauf hinweisen, welche Bereiche nicht indexiert werden sollen.

Genau darin liegt das Problem: Wenn dort Pfade genannt werden, können diese oft trotzdem direkt im Browser aufgerufen werden. „Nicht für Suchmaschinen gedacht“ bedeutet also nicht automatisch „vor Zugriff geschützt“.

Deine Aufgabe: Finde die passende Datei, lies ihren Inhalt und prüfe, ob sich daraus ein interessanter Bereich der Website ableiten lässt.

← Zurück zur Startseite