Google Groups no longer supports new Usenet posts or subscriptions. Historical content remains viewable.
Dismiss

Difficoltà a fermare MSN con robots.txt

0 views
Skip to first unread message

orbo-bruno

unread,
Jan 6, 2010, 6:51:11 PM1/6/10
to
Premetto ho un blog interno al sito e pur avendo settato:


User-agent: Msnbot
Disallow:

User-agent: MSNBOT
Disallow:

User-agent: MSN Search
Disallow:

nel file robots.txt, posto nella root del sito, non riesco a fermarne
l'accesso al blog che è nella directory
http//www.miosito.xxx/directory/directory/index.php (è un problema di
questi ultimi giorni).

Nei log appare:

msnbot-​65-​55-​207-​121.​search.​msn.​com

anche nel forum del sito (posto nella directory /cgi-bin/ , negli ultimi
giorni sono comparsi vari IP di MSN (infatti il problema è ha cominciato
ad entrare anche con vari IP diversi.

Cosa posso fare?
Per caso ho indicato un user-agent errato (superato)?

grazie anticipatamente


0 new messages