######################################### # # address all search engine spiders by using * wildcard # User-agent: * # ######################################### # # folders which spiders are not permitted to index # Disallow: /images/ Disallow: /jscripts/ Disallow: /stylesheets/ Disallow: /mmex/ Disallow: /enquiry_data/ # ######################################### # # root files which spiders are not permitted to index # # #########################################