doc/webserver/robots.txt

   1 # This is the Internet Junkbuster web site.
   2 #
   3 # If the robot is connecting through a JunkBuster, then the
   4 # control interface is at /config.   It isn't very useful
   5 # to index it, and you're likely to break stuff.  So go away!
   6 #
   7 # Even if you're not connected through a JunkBuster, the
   8 # one "JunkBuster's not working" page there is not very
   9 # interesting.
  10
  11 User-agent: *
  12 Disallow: /config/
  13
  14
  15