User-agent: Msnbot
Disallow:
User-agent: MSNBOT
Disallow:
User-agent: MSN Search
Disallow:
nel file robots.txt, posto nella root del sito, non riesco a fermarne
l'accesso al blog che è nella directory
http//www.miosito.xxx/directory/directory/index.php (è un problema di
questi ultimi giorni).
Nei log appare:
msnbot-65-55-207-121.search.msn.com
anche nel forum del sito (posto nella directory /cgi-bin/ , negli ultimi
giorni sono comparsi vari IP di MSN (infatti il problema è ha cominciato
ad entrare anche con vari IP diversi.
Cosa posso fare?
Per caso ho indicato un user-agent errato (superato)?
grazie anticipatamente