Eso no quita que intente verlo, y aunque le aparecerá que no esta autorizado, seguirá tratando y consumiendo tus recursos. Usa mejor el archivo robots.txt.
El mio lo tengo asi:
Quote:
User-agent: *
Disallow: /admin
Disallow: /administrator
Disallow: /cache
Disallow: /clientscript
Disallow: /editor
Disallow: /help
Disallow: /highslide
Disallow: /banners
Disallow: /error
Disallow: /header
Disallow: /footer
Disallow: /includes
Disallow: /components
Disallow: /mambots
Disallow: /themes
Disallow: /pnTemp
Disallow: /docs
Disallow: /javascript
Disallow: /foro/ultimos.php
Disallow: /foro/showgroups.php
Disallow: /foro/showpost.php
Disallow: /foro/memberlist.php
Disallow: /foro/usercp.php
Disallow: /foro/search.php
Disallow: /foro/search.php?do=getdaily
Disallow: /foro/chat.php
Disallow: /foro/admincp/
Disallow: /foro/modcp/
Disallow: /foro/online.php
Disallow: /foro/subscription.php
Disallow: /foro/sendtofriend.php
Disallow: /foro/threadrate.php
Disallow: /foro/attachment.php
Disallow: /foro/avatar.php
Disallow: /foro/faq.php
Disallow: /foro/profile.php
Disallow: /foro/misc.php
Disallow: /foro/newreply.php
Disallow: /foro/newthread.php
Disallow: /foro/printthread.php
Disallow: /foro/private.php
Disallow: /foro/register.php
Disallow: /foro/moderator.php
Disallow: /foro/newattachment.php |
el archivo robots.txt se pone en la raíz del sitio. En mi caso tengo joomla en la raiz y
vb en un subdirectorio.