# FICHERO: robots.txt # SITIO: www.fibranet.org # AUTOR: Juan Miguel Taboada (webmaster@fibranet.org) # FECHA: Málaga a 27 de abril de 2003 # DESCRIPCION: Este es el fichero de control de arañas o robots # WWW de www.fibranet.org # ### POLITICA ESPECIFICA ### ######################################### # Agente específico al que afecta # User-agent: fibranetbot # Sitios afectados # Disallow: User-agent: msnbot Disallow: / # ### POLITICA GENERAL ### ############################################ # Agente al que afecta # User-agent: * User-agent: * # Sitios afectados # Disallow: /cgi-bin # This is an infinite virtual URL space Disallow: