Robots.txt: user-agent per regel. Je kunt nu per regel in robots.txt een specifieke user-agent instellen.