conkurrence

MCPcommunity
v1.0.5JE Vectors LLCBUSL-1.1Aggiornato 17 g fanpmGitHub

Multi-model rating for AI evaluation: measures agreement among model raters (Fleiss' κ, Kendall's W) to find contested items for expert review. Agreement is reliability, not validity. Maintenance mode.

Funziona in
ClaudeCursorCopilotGemini

Dedotto dai trasporti dichiarati da questo annuncio (stdio). Un client che non compare qui non è escluso — semplicemente Forge non è in grado di confermarlo.

Indicizzato automaticamente da fonti pubbliche. Non ancora verificato dal suo sviluppatore su Forge.Rivendica questo annuncio →
73Download/sett.
17 g faUltimo aggiornamento
Pacchetto
AutoreJE Vectors LLC
LicenzaBUSL-1.1
Versione1.0.5
Fontenpm+mcp-registry
Stato di fiducia
B
60/100Buono
✓Presente nell’indice di Forge+10/10
—Identità del publisher verificata+0/20
→ Publisher: esegui `forge publish` dal repo del pacchetto per rivendicarne la proprietà
—Firma di pubblicazione Ed25519+0/5
→ Inclusa automaticamente quando il publisher esegue `forge publish`
—Verifica del dominio+0/5
→ Publisher: ospita /.well-known/forge.json sulla homepage del pacchetto con { "publisher": "<github-login>" }
—npm Trusted Publishing (Sigstore)+0/5
→ Pubblica da GitHub Actions con --provenance perché l’attestation leghi questo pacchetto a questo repo
—Corrispondenza del maintainer npm+0/5
→ Si ottiene quando la tua identità è verificata qui sopra e quel login è maintainer npm di questo pacchetto
✓Analisi CVE · pulita+30/30
✓Analisi statica · pulita+20/20
Incollalo in Claude Code, Cursor o qualsiasi assistente di IA per colmare tutte le lacune
StatoIndicizzato dalla community
PublisherNon verificato
FirmaNon firmato
Dominio—
Provenienza—
Dipendenze✓ 60 risolte+ · nessuna vulnerabile
Superficie di strumenti12 strumenti · nessuno privilegiato
Analisi di sicurezza✓ Pulitov1.0.5 · 1 g faQuanto è efficace questa analisi?
ValutazioniNessuna
Indicizzato9 ott 2026

La verifica conferma l’identità del publisher (la proprietà del repo), non la sicurezza del codice. L’analisi di sicurezza copre i CVE noti e gli script di installazione sospetti.

Strumenti

12 strumenti · nessuno privilegiato
Estratto staticamente dal pacchetto pubblicatov1.0.5 · 1d ago

Letto dal codice che npm distribuisce davvero, al momento dell’analisi. Il pacchetto non è mai stato eseguito. Gli strumenti registrati dinamicamente a runtime, o nascosti in codice impacchettato o minificato, possono sfuggire — quindi questo è un limite inferiore della superficie di strumenti, non un censimento completo.

conkurrence_bedrock_healthTest Bedrock model accessibility. Probes each model with a minimal invocation to verify IAM permissions and model enablement. Reports which models are accessible in the configured region.

Test Bedrock model accessibility. Probes each model with a minimal invocation to verify IAM permissions and model enablement. Reports which models are accessible in the configured region.

Per questo strumento non è stato pubblicato alcuno schema di input.

conkurrence_compareCompare two Conkurrence runs side-by-side. Shows κ deltas, per-field changes, classification shifts, and cost differences. Provide run_ids or inline results.

Compare two Conkurrence runs side-by-side. Shows κ deltas, per-field changes, classification shifts, and cost differences. Provide run_ids or inline results.

Per questo strumento non è stato pubblicato alcuno schema di input.

conkurrence_estimateEstimate the cost and token usage for a Conkurrence evaluation run before executing it.

Estimate the cost and token usage for a Conkurrence evaluation run before executing it.

Per questo strumento non è stato pubblicato alcuno schema di input.

conkurrence_licenseManage your ConKurrence license. Actions: "validate" checks a license key against the API, "activate" stores a key for this MCP session, "status" shows current license state (free runs remaining or active key info).

Manage your ConKurrence license. Actions: "validate" checks a license key against the API, "activate" stores a key for this MCP session, "status" shows current license state (free runs remaining or active key info).

Per questo strumento non è stato pubblicato alcuno schema di input.

conkurrence_list_runsList all Conkurrence runs stored in the current session. Shows run_id, schema name, timestamp, overall kappa, item count, and cost for each run. Use run_ids with other tools (compare, trend, report).

List all Conkurrence runs stored in the current session. Shows run_id, schema name, timestamp, overall kappa, item count, and cost for each run. Use run_ids with other tools (compare, trend, report).

Per questo strumento non è stato pubblicato alcuno schema di input.

conkurrence_providersCheck which AI provider API keys are configured. Reports availability of Bedrock (AWS credential chain), OpenAI (OPENAI_API_KEY), Gemini (GOOGLE_API_KEY or GEMINI_API_KEY), and MCP Sampling (host model). Also documents the model prefix convention.

Check which AI provider API keys are configured. Reports availability of Bedrock (AWS credential chain), OpenAI (OPENAI_API_KEY), Gemini (GOOGLE_API_KEY or GEMINI_API_KEY), and MCP Sampling (host model). Also documents the model prefix convention.

Per questo strumento non è stato pubblicato alcuno schema di input.

conkurrence_reportGenerate a detailed markdown report from Conkurrence results. Provide either a run_id (from a previous conkurrence_run) or inline results.

Generate a detailed markdown report from Conkurrence results. Provide either a run_id (from a previous conkurrence_run) or inline results.

Per questo strumento non è stato pubblicato alcuno schema di input.

conkurrence_runExecute a Conkurrence evaluation. If multiple model providers are configured, measures inter-rater consensus across models (Fleiss κ). If no API credentials are available, automatically uses the host model for a self-consistency check (5 runs by default). Returns a summary with run_id — full result…

Execute a Conkurrence evaluation. If multiple model providers are configured, measures inter-rater consensus across models (Fleiss κ). If no API credentials are available, automatically uses the host model for a self-consistency check (5 runs by default). Returns a summary with run_id — full result…

Per questo strumento non è stato pubblicato alcuno schema di input.

conkurrence_suggestAnalyze sample items and suggest an evaluation schema. Returns field suggestions with reliability estimates. Use before creating a schema to get AI-guided field design. Supports multi-provider models: Bedrock (default), OpenAI ("openai." prefix), Gemini ("gemini." prefix). If no API credentials are…

Analyze sample items and suggest an evaluation schema. Returns field suggestions with reliability estimates. Use before creating a schema to get AI-guided field design. Supports multi-provider models: Bedrock (default), OpenAI ("openai." prefix), Gemini ("gemini." prefix). If no API credentials are…

Per questo strumento non è stato pubblicato alcuno schema di input.

conkurrence_templatesList available evaluation templates or get the full contents of a specific template. Templates include schema, sample data, and config files.

List available evaluation templates or get the full contents of a specific template. Templates include schema, sample data, and config files.

Per questo strumento non è stato pubblicato alcuno schema di input.

conkurrence_trendAnalyze trends across multiple Conkurrence runs. Shows overall and per-field kappa progression, degradation alerts, schema evolution, and classification distribution over time. Provide run_ids or inline results. Requires 2+ runs.

Analyze trends across multiple Conkurrence runs. Shows overall and per-field kappa progression, degradation alerts, schema evolution, and classification distribution over time. Provide run_ids or inline results. Requires 2+ runs.

Per questo strumento non è stato pubblicato alcuno schema di input.

conkurrence_validate_schemaValidate an evaluation schema for use with Conkurrence. Returns validation results including any errors or warnings.

Validate an evaluation schema for use with Conkurrence. Returns validation results including any errors or warnings.

Per questo strumento non è stato pubblicato alcuno schema di input.

12 strumenti su 12 hanno pubblicato una descrizione.

I nomi e le descrizioni degli strumenti sono scritti dal publisher e mostrati alla lettera come testo inerte. Sono le stringhe che un client MCP passa a un modello, quindi Forge vi cerca schemi di prompt injection — ogni rilievo compare insieme all’analisi di sicurezza qui sopra. «Privilegiato» è una corrispondenza di parola chiave sul nome dello strumento, non una verifica di ciò che fa: un nome innocuo può comunque fare qualsiasi cosa.

Descrizione

Multi-model rating for AI evaluation: measures agreement among model raters (Fleiss' κ, Kendall's W) to find contested items for expert review. Agreement is reliability, not validity. Maintenance mode.

Parole chiave
ai-evaluationgolden-datasetai-consensusllm-evaluationai-testingconkurrencefleiss-kappakendall-winter-rater-reliabilitymcpbedrock
Alternative
Confronto delle superfici di strumenti…

Albero delle dipendenze

Ciò che una scansione di Forge ha risolto dai metadati npm il 2026-10-20: risoluzione osservata, non una dichiarazione dell'editore.

60 pacchetti risolti · 18 diretti · nessuno con avvisi di sicurezza La risoluzione si ferma alla profondità 4 e a 60 pacchetti.

La scansione si è fermata al limite di 60 pacchetti. Il resto dell'albero non è mai stato risolto.

Altri 36 pacchetti risolti non vengono disegnati qui (limite di visualizzazione: 24). Ogni dipendenza con un avviso di sicurezza viene disegnata comunque. Inventario completo (SBOM CycloneDX)

Dichiarate ma non risolte

124 dipendenze dichiarate non sono mai arrivate nell'albero. Mancano dalla risoluzione di Forge, non dal pacchetto.

+112 altre non elencate. I conteggi per motivo qui sopra le comprendono tutte.

Non seguite: peerDependencies. Questo albero copre solo le dipendenze di runtime, quindi ciò che queste comportano non è mai stato risolto.

Argomenti

Correlati in testing & ci