User-agent: * # para todos los robots bloqueo el ingreso a los archivos xml, al directorio bin y al ~private Disallow: /xmldata/*.xml Disallow: /xmldata/*.* Disallow: *.xml Disallow: *.txt Disallow: *.js Disallow: /*.vb Disallow: /bin/* Disallow: *.rar Disallow: *.zip # Esto es un comentario