Générateur de robots.txt

Générateur de robots.txt gratuit. Ajoutez des groupes User-agent avec des motifs Allow/Disallow, un Crawl-delay optionnel et des URL Sitemap pour assembler un robots.txt propre — le tout dans votre navigateur.