Crawler im Wiki?

Geschrieben von / Written by Uli, wiki 56795 am 06. Februar 2007 10:35:

Hi,

habe in den Such-Logs unseres Wiki folgenden Eintrag gefunden:

ConveraCrawler/0.9e (+http://www.authoritativeweb.com/crawl)

Bringt es was den Meta-Tag: META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW" einzubauen?
Möchte eigentlich keine Robots im Wiki haben.

btw. wird es in absehbarer Zukunft auch ein Such-Log für die Forensuche geben?

Gruß, Uli

Antworten: / Answers: