#Primero el Contenido Adjunto.
User-agent: *
Disallow: /cgi-bin/
Disallow: /images/
Disallow: /documentos/
Disallow: /imagenes/
Disallow: /librerias/
Disallow: /modelo/
Disallow: /modules/
Disallow: /osc/
Disallow: /tracking/
Disallow: /menu.php
Disallow: /content_left.php
Disallow: /foot.php
Disallow: /myconfig_incl.php
Disallow: /administrador.php
#
#Sitemap permitido.
#
Sitemap:http://www.unibol.net/sitemap.xml
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante…
#
User-agent: MSIECrawler
Disallow: /

User-agent: WebCopier
Disallow: /

User-agent: HTTrack
Disallow: /

User-agent: Microsoft.URL.Control
Disallow: /

User-agent: libwww
Disallow: /