Hej igen
Med vägledning av all information som jag har fått här i forumt så lade jag in följande i robots.txt:
User-agent: Slurp
Crawl-delay: 1000
User-agent: Slurp.so
Crawl-delay: 1000
Och problemet är som bortblåst. Nu besöker dom våra site lika lite som alla andra.
Tack till er alla! Jag kände inte till robots.txt innan.
/Martin