####################################################### # The Robots file controls the actions of # Search Robots that conform to the # Robot spec. # $Id: robots.txt,v 1.8 2005/12/07 21:06:31 bmenoza Exp $ ####################################################### # Rules for Google User-agent: googlebot-pm Disallow: ###################################### # Rules for Google User-agent: googlebot Disallow: ###################################### # Rules for Google User-agent: Googlebot-IA Disallow: ###################################### # Rules for MSN User-agent: MSNBot Disallow: ###################################### # Rules for Yahoo (Slurp) run by Inktomi User-agent: Slurp Disallow: ###################################### # Rules for Ask run by Teoma User-agent: Teoma Disallow: ###################################### # Rules for johntest - QA Test User-agent: johntest Disallow: ###################################### # Default rules for other crawlers not listed # default = do not index this site User-agent: * Disallow: / Disallow: /article/ Disallow: /images/ Disallow: /scripts/ Disallow: /styles/ ###################################### # Allow Google, Yahoo, and MSN to auto discover the sitemap Sitemap: http://connection.ebscohost.com/sitemap_index.xml ######################################