# Todos las arañas tienen acceso a todo el directorio (preferible no especificar carpetas comprometidas) User-agent: * Disallow: # Los robots han de esperar 30 segundos entre cada petición (no afecta a todos los robots, pero si a los principales: MSNBot, Slurp i Googlebot) Crawl-delay: 30 # Ayuda para encontrar el sitemap Sitemap: https://www.guheko.com/sitemap.xml