I-LEARNING

Robot Guard

Ce site a un fichier robots.txt.
Les crawlers y sont… peut-être trop bavards.

# Standard robots.txt
User-agent: *
Disallow: ???
Lire robots.txt