Google Groups no longer supports new Usenet posts or subscriptions. Historical content remains viewable.
Dismiss

Afvisning af baidu

5 views
Skip to first unread message

Leif Neland

unread,
Nov 18, 2011, 6:09:50 AM11/18/11
to
En flok baiduspiders fra forskellige kinesiske ip-adresser har hærget mit
website med requests med en uforskammet hastighed.

De respekterer ikke robots.txt. så nu har jeg lavet således, at hvis
useragent er baiduspider, får de en 301 redirct til en side om Liu Xiaobo,
den kinesiske nobelprismodtager, som regimet i Kina forsøger at
hemmeligholde.

Så mon ikke min side bliver fredet fra den søgemaskine nu? :-)

Leif


Erik Ginnerskov

unread,
Nov 20, 2011, 4:16:20 PM11/20/11
to
Leif Neland wrote:

> De respekterer ikke robots.txt.

Frække slamberter.

> så nu har jeg lavet således, at hvis
> useragent er baiduspider, får de en 301 redirct

Man må forsvare sig.

> til en side om Liu
> Xiaobo, den kinesiske nobelprismodtager, som regimet i Kina forsøger
> at hemmeligholde.

Men hvad har den stakkels Liu Xiaobo gjort dig, siden han skal generes på
den måde. Hvorfor sender du ikke banditterne til det kinesiske
kommunistpartis politbureaus hjemmeside?

--
Med venlig hilsen
Erik Ginnerskov
http://hjemmesideskolen.dk - http://ginnerskov.dk

Leif Neland

unread,
Nov 20, 2011, 4:37:53 PM11/20/11
to
Den 20-11-2011 22:16, Erik Ginnerskov skrev:
> Leif Neland wrote:
>
>> De respekterer ikke robots.txt.
>
> Frække slamberter.
>
>> så nu har jeg lavet således, at hvis
>> useragent er baiduspider, får de en 301 redirct
>
> Man må forsvare sig.
>
>> til en side om Liu
>> Xiaobo, den kinesiske nobelprismodtager, som regimet i Kina forsøger
>> at hemmeligholde.
>
> Men hvad har den stakkels Liu Xiaobo gjort dig, siden han skal generes
> på den måde. Hvorfor sender du ikke banditterne til det kinesiske
> kommunistpartis politbureaus hjemmeside?
>

Regimet i Kina vil skjule hans eksistens, så jeg giver kineserne flere
muligheder for at blive opmærksom på ham.

Det er jo ikke Liu's egen hjemmeside; en sådan ville være fjernet af
censuren forlængst. Siden er på mig eget domæne, på en anden server.

Leif

Rune Jensen

unread,
Nov 24, 2011, 11:35:36 AM11/24/11
to
On 18 Nov., 03:09, "Leif Neland" <l...@neland.dk> wrote:
> En flok baiduspiders fra forskellige kinesiske ip-adresser har hærget mit
> website med requests med en uforskammet hastighed.

Hvad er hastigheden?

Normalt hærger disse botter med 2-4 requests i sekundet. Men så slem
synes jeg nu ikke Baidu har været.

> De respekterer ikke robots.txt. så nu har jeg lavet således, at hvis
> useragent er baiduspider, får de en 301 redirct til en side om Liu Xiaobo,
> den kinesiske nobelprismodtager, som regimet i Kina forsøger at
> hemmeligholde.

Det er kreativt :)

Hvad siger iøvrigt acceptencoding og acceptlanguage? Og IP? Har du
taget IPerne på projecthoneypot,org?

Kunne du måske give lidt uddrag af loggen, det pirrer min
nysgerrighed.


MVH
Rune Jensen

Rune Jensen

unread,
Nov 24, 2011, 11:50:04 AM11/24/11
to
On 18 Nov., 03:09, "Leif Neland" <l...@neland.dk> wrote:

> En flok baiduspiders fra forskellige kinesiske ip-adresser har hærget mit
> website med requests med en uforskammet hastighed.

Her er fra webmasterworld en diskussion om Baidu:
http://www.webmasterworld.com/search_engine_spiders/4348357.htm


MVH
Rune Jensen
0 new messages