Multi-model rating for AI evaluation: measures agreement among model raters (Fleiss' κ, Kendall's W) to find contested items for expert review. Agreement is reliability, not validity. Maintenance mode.
Abgeleitet aus den Transporten, die dieser Eintrag deklariert (stdio). Ein Client, der hier nicht steht, ist damit nicht ausgeschlossen — Forge kann ihn nur nicht bestätigen.
Die Verifizierung bestätigt die Identität des Publishers (die Inhaberschaft am Repo), nicht die Sicherheit des Codes. Der Sicherheits-Scan deckt bekannte CVEs und verdächtige Installationsskripte ab.
Aus dem Quellcode gelesen, den npm tatsächlich ausliefert, zum Zeitpunkt des Scans. Das Paket wurde nie ausgeführt. Tools, die zur Laufzeit dynamisch registriert werden oder in gebündeltem beziehungsweise minifiziertem Code stecken, können übersehen werden — das hier ist also eine Untergrenze der Tool-Oberfläche, keine vollständige Erhebung.
conkurrence_bedrock_healthTest Bedrock model accessibility. Probes each model with a minimal invocation to verify IAM permissions and model enablement. Reports which models are accessible in the configured region.Test Bedrock model accessibility. Probes each model with a minimal invocation to verify IAM permissions and model enablement. Reports which models are accessible in the configured region.
Für dieses Tool wurde kein Eingabeschema veröffentlicht.
conkurrence_compareCompare two Conkurrence runs side-by-side. Shows κ deltas, per-field changes, classification shifts, and cost differences. Provide run_ids or inline results.Compare two Conkurrence runs side-by-side. Shows κ deltas, per-field changes, classification shifts, and cost differences. Provide run_ids or inline results.
Für dieses Tool wurde kein Eingabeschema veröffentlicht.
conkurrence_estimateEstimate the cost and token usage for a Conkurrence evaluation run before executing it.Estimate the cost and token usage for a Conkurrence evaluation run before executing it.
Für dieses Tool wurde kein Eingabeschema veröffentlicht.
conkurrence_licenseManage your ConKurrence license. Actions: "validate" checks a license key against the API, "activate" stores a key for this MCP session, "status" shows current license state (free runs remaining or active key info).Manage your ConKurrence license. Actions: "validate" checks a license key against the API, "activate" stores a key for this MCP session, "status" shows current license state (free runs remaining or active key info).
Für dieses Tool wurde kein Eingabeschema veröffentlicht.
conkurrence_list_runsList all Conkurrence runs stored in the current session. Shows run_id, schema name, timestamp, overall kappa, item count, and cost for each run. Use run_ids with other tools (compare, trend, report).List all Conkurrence runs stored in the current session. Shows run_id, schema name, timestamp, overall kappa, item count, and cost for each run. Use run_ids with other tools (compare, trend, report).
Für dieses Tool wurde kein Eingabeschema veröffentlicht.
conkurrence_providersCheck which AI provider API keys are configured. Reports availability of Bedrock (AWS credential chain), OpenAI (OPENAI_API_KEY), Gemini (GOOGLE_API_KEY or GEMINI_API_KEY), and MCP Sampling (host model). Also documents the model prefix convention.Check which AI provider API keys are configured. Reports availability of Bedrock (AWS credential chain), OpenAI (OPENAI_API_KEY), Gemini (GOOGLE_API_KEY or GEMINI_API_KEY), and MCP Sampling (host model). Also documents the model prefix convention.
Für dieses Tool wurde kein Eingabeschema veröffentlicht.
conkurrence_reportGenerate a detailed markdown report from Conkurrence results. Provide either a run_id (from a previous conkurrence_run) or inline results.Generate a detailed markdown report from Conkurrence results. Provide either a run_id (from a previous conkurrence_run) or inline results.
Für dieses Tool wurde kein Eingabeschema veröffentlicht.
conkurrence_runExecute a Conkurrence evaluation. If multiple model providers are configured, measures inter-rater consensus across models (Fleiss κ). If no API credentials are available, automatically uses the host model for a self-consistency check (5 runs by default). Returns a summary with run_id — full result…Execute a Conkurrence evaluation. If multiple model providers are configured, measures inter-rater consensus across models (Fleiss κ). If no API credentials are available, automatically uses the host model for a self-consistency check (5 runs by default). Returns a summary with run_id — full result…
Für dieses Tool wurde kein Eingabeschema veröffentlicht.
conkurrence_suggestAnalyze sample items and suggest an evaluation schema. Returns field suggestions with reliability estimates. Use before creating a schema to get AI-guided field design. Supports multi-provider models: Bedrock (default), OpenAI ("openai." prefix), Gemini ("gemini." prefix). If no API credentials are…Analyze sample items and suggest an evaluation schema. Returns field suggestions with reliability estimates. Use before creating a schema to get AI-guided field design. Supports multi-provider models: Bedrock (default), OpenAI ("openai." prefix), Gemini ("gemini." prefix). If no API credentials are…
Für dieses Tool wurde kein Eingabeschema veröffentlicht.
conkurrence_templatesList available evaluation templates or get the full contents of a specific template. Templates include schema, sample data, and config files.List available evaluation templates or get the full contents of a specific template. Templates include schema, sample data, and config files.
Für dieses Tool wurde kein Eingabeschema veröffentlicht.
conkurrence_trendAnalyze trends across multiple Conkurrence runs. Shows overall and per-field kappa progression, degradation alerts, schema evolution, and classification distribution over time. Provide run_ids or inline results. Requires 2+ runs.Analyze trends across multiple Conkurrence runs. Shows overall and per-field kappa progression, degradation alerts, schema evolution, and classification distribution over time. Provide run_ids or inline results. Requires 2+ runs.
Für dieses Tool wurde kein Eingabeschema veröffentlicht.
conkurrence_validate_schemaValidate an evaluation schema for use with Conkurrence. Returns validation results including any errors or warnings.Validate an evaluation schema for use with Conkurrence. Returns validation results including any errors or warnings.
Für dieses Tool wurde kein Eingabeschema veröffentlicht.
12 von 12 Tools haben eine Beschreibung veröffentlicht.
Tool-Namen und -Beschreibungen stammen vom Publisher und werden wortgetreu als inerter Text angezeigt. Es sind die Zeichenketten, die ein MCP-Client an ein Modell übergibt, deshalb prüft Forge sie auf Prompt-Injection-Muster — jeder Befund erscheint oben beim Sicherheits-Scan. „Privilegiert“ ist ein Schlagwort-Treffer im Tool-Namen, keine Prüfung dessen, was das Tool tut: ein harmlos klingender Name kann trotzdem alles tun.
Multi-model rating for AI evaluation: measures agreement among model raters (Fleiss' κ, Kendall's W) to find contested items for expert review. Agreement is reliability, not validity. Maintenance mode.
Verlinkte Namen öffnen den Forge-Index aller Einträge, bei denen dieses Tool beobachtet wurde. Alle indexierten Tools durchsuchen.
Der Durchlauf endete an der Grenze von 60 Paketen. Der Rest des Baums wurde nie aufgelöst.
36 weitere aufgelöste Pakete werden hier nicht gezeichnet (Anzeigegrenze: 24). Jede Abhängigkeit mit einem Sicherheitshinweis wird unabhängig von der Grenze gezeichnet. Vollständiges Inventar (CycloneDX-SBOM)
124 deklarierte Abhängigkeiten sind nie im Baum gelandet. Sie fehlen in Forges Auflösung, nicht im Paket.
+112 weitere nicht aufgeführt. Die Zählungen nach Grund oben erfassen sie alle.
Nicht verfolgt: peerDependencies. Dieser Baum erfasst nur Laufzeitabhängigkeiten; was jene mitbringen, wurde nie aufgelöst.