# Robots.txt # # All robots will spider the domain ############################### User-agent: * Disallow: # # End of robots.txt file # ###############################