Voisiko Majestic 12 -botin blokata?

[Ranxer]

Terve,

sivustoamme indexoi MJ-12 niminen botti ja tästä botista ja yrityksestä sen takana on liikkeellä paljon kritiikkiä, ja myös siitä mihin indexoituja saitteja käytetään.

Voisiko tämän kyseisen botin blokata munpalsta.com:in toimesta ?


How can I block MJ12bot?
MJ12bot adheres to the robots.txt standard. If you want the bot to prevent website from being crawled then add the following text to your robots.txt:

User-agent: MJ12bot
Disallow: /
Please do not waste your time trying to block bot via IP in htaccess - we do not use any consequitive IP blocks so your efforts will be in vain. Also please make sure the bot can actually retrieve robots.txt itself - if it can't then it will assume (this is the industry practice) that its okay to crawl your site.

If you have reason to believe that MJ12bot did NOT obey your robots.txt commands, then please let us know via email: bot@majestic12.co.uk. Please provide URL to your website and log entries showing bot trying to retrieve pages that it was not supposed to.

LÄHDE:

http://www.majestic12.co.uk/projects/ds ... j12bot.php

[)`???]

Eikös botteja voi itsekin jotenkin suitsia yp-paneelista. Enemmän asiaan perehtyneet enemmän kertokoot.

Mielestäni ei voi poistaa kokonaan yhtä bottia yhdesä pyynnöstä, käyttäjiä täällä kuitenkin paljon. Ei ainakaan kunnon syitä kertaamatta.

Vähän kun joku pyytäisi googlen botteja poistoon, onhan googlen jutuissakin kaikkia häikkään, mutta harva sitä varmaan haluaisia.

[Pettis]

Foorumilla hallintapaneelissa on käyttäjät ja ryhmät -välilehti. Sieltä löytyy ryhmien asetukset, jossa on bottiryhmäkin listattuna. Voit hallita bottiryhmää ja tarvittaessa poistaa bottikäyttäjän ryhmästä. Jos kuitenkin poistat botin ryhmästä toimii foorumi sille samalla tavalla kuin kaikille vieraskäyttäjille.

Lähtökohtaisesti en kuitenkaan lähde foorumeilta yksittäisiä botteja estämään robots.txt:llä ilman erittäin painavaa syytä. Roskapostittavat botit ovat toki asia erikseen.