Analyze and generate robots.txt with AI crawler detection for 20+ bots like GPTBot and ClaudeBot.
An MCP (Model Context Protocol) server that provides tools for parsing, analyzing, and generating robots.txt files with a focus on AI bot detection. ------|-------------| | Fetch and analyze a robots.txt from any URL. Shows which AI bots are blocked/allowed. | | Analyze pasted robots.txt content for AI bot blocking status. | | Generate a robots.txt with specified blocked bots, sitemaps, and…
Déduit des transports déclarés par cette annonce (stdio). Un client absent de cette liste n’est pas écarté pour autant — c’est simplement quelque chose que Forge ne peut pas confirmer.
La vérification confirme l’identité de l’éditeur (la propriété du dépôt), pas la sûreté du code. L’analyse de sécurité couvre les CVE connues et les scripts d’installation suspects.
Forge n’a aucune analyse enregistrée pour cette entrée et n’a donc aucune observation de sa surface d’outils. C’est une absence de preuve, pas la preuve qu’elle n’expose aucun outil.
An MCP (Model Context Protocol) server that provides tools for parsing, analyzing, and generating robots.txt files with a focus on AI bot detection. ------|-------------| | Fetch and analyze a robots.txt from any URL. Shows which AI bots are blocked/allowed. | | Analyze pasted robots.txt content for AI bot blocking status. | | Generate a robots.txt with specified blocked bots, sitemaps, and custom rules. | | List all known AI bots with user-agents, companies, and descriptions. | | Check if a…