szerda, november 12, 2008

[robots.txt] A Disallow az csak a tartalmat tiltja

Mint nemrég megtudtam a disallow engedni az adott oldal indexelését, csak a tartalomét nem. Ha az indexelést akarjuk tiltani, ahhoz a noindex-et kell használni. Bővebben: www.google.com/support/webmasters/bin/answer.py?hl=hu&answer=35303

--
forwarded from http://webni.innen.hu/RobotsTxt#msg20081112043450-0500@webni.innen.hu