# robots.txt fuer board.gulli.com # geblockte dateien wuerden nur viele Aufrufe aber wenig unterschiedlichen Text enthalten User-agent: * Disallow: /search.php Disallow: /private.php Disallow: /private2.php Disallow: /member.php Disallow: /member2.php Disallow: /editpost.php Disallow: /newreply.php Disallow: /newthread.php Disallow: /newreply.php Disallow: /printthread.php Disallow: /sendtofriend.php Disallow: /postings.php Disallow: /report.php Disallow: /moderator.php Disallow: /online.php Disallow: /bedankomat.php Disallow: /attachment.php Disallow: /post/ Disallow: /lastpost-thread/ Disallow: /lastpost-forum/ Disallow: /*&goto=nextnewest Disallow: /*&goto=nextoldest # Na, schlauer geworden welche Verzeichnisse ihr bei mir alle besuchen könnt? # E-Mail Sammler raus User-agent: WX_mail/2.000 Disallow: / User-agent: ia_archiver Disallow: / User-agent: EmailCollector Disallow: / User-agent: WhoWhere Disallow: / User-agent: Roverbot Disallow: / User-agent: ActiveAgent Disallow: / User-agent: EmailSiphon Disallow: / # Dank an suchfibel.de für die beispielhafte robots.txt :-)