Analyze and generate robots.txt with AI crawler detection for 20+ bots like GPTBot and ClaudeBot.
An MCP (Model Context Protocol) server that provides tools for parsing, analyzing, and generating robots.txt files with a focus on AI bot detection. ------|-------------| | Fetch and analyze a robots.txt from any URL. Shows which AI bots are blocked/allowed. | | Analyze pasted robots.txt content for AI bot blocking status. | | Generate a robots.txt with specified blocked bots, sitemaps, and…
Inferido de los transportes que declara este listado (stdio). Que un cliente no aparezca aquí no significa que se haya descartado: simplemente Forge no puede confirmarlo.
La verificación confirma la identidad del publicador (la propiedad del repo), no la seguridad del código. El análisis de seguridad cubre los CVE conocidos y los scripts de instalación sospechosos.
Forge no tiene ningún análisis registrado de esta entrada, así que no tiene ninguna observación de su superficie de herramientas. Eso es ausencia de pruebas, no prueba de que no exponga ninguna herramienta.
An MCP (Model Context Protocol) server that provides tools for parsing, analyzing, and generating robots.txt files with a focus on AI bot detection. ------|-------------| | Fetch and analyze a robots.txt from any URL. Shows which AI bots are blocked/allowed. | | Analyze pasted robots.txt content for AI bot blocking status. | | Generate a robots.txt with specified blocked bots, sitemaps, and custom rules. | | List all known AI bots with user-agents, companies, and descriptions. | | Check if a…