robots.txt Evaluator & Tester
100% Client-Side
🛡️ Standard Web App
🤖 Block AI Crawlers (GPT/Claude)
🛒 E-Commerce Store
🚪 Staging / Private (Disallow All)
User-Agents: 1
Rules: 0
Sitemaps: 0
Contenido robots.txt
📂 Cargar Ejemplo
🧪 Probador de URL en Tiempo Real
User-Agent
* (Todos los bots)
Googlebot
Bingbot
GPTBot (OpenAI)
ClaudeBot (Anthropic)
CCBot (Common Crawl)
Ruta / URL a Evaluar
Veredicto de Rastreo
📋 Copy robots.txt
⬇ Download
Directivas y Reglas Analizadas: