Hmm, nagyon koszi, mar eleg idegesito volt, hogy a kis helyi webhelyem savszele (ADSL) nagyreszt azzal megy el, hogy 3 bot indexeli egyfolytaban :(
--
forwarded from http://webni.innen.hu/RobotsTxt#msg20061216141023-0500@webni.innen.hu
szombat, december 16, 2006
[robots.txt] Koszi!
