Aggiungi a ChromeSei lo sviluppatore di questa app? Verifica la proprietà per gestire questa scheda.
Ottieni un’app desktop dedicata per BenchSpan su Mac, Windows e Linux con WebCatalog Desktop.
- Apri BenchSpan direttamente dal Dock o dalla barra delle applicazioni.
- Lavora senza distrazioni in una finestra dedicata, separata dalle schede del browser.
- Resta connesso a più account BenchSpan e passa dall’uno all’altro senza disconnetterti.
BenchSpan è una **piattaforma di benchmarking degli agenti** progettata per gli sviluppatori che creano agenti IA, consentendo il completamento dei benchmark in pochi minuti anziché in ore.[1] Esegue valutazioni in contenitori Docker isolati in parallelo, supportando carichi di lavoro come il banco SWE di 14 ore con una configurazione minima.[1] Gli utenti forniscono un semplice script bash per avviare il proprio agente, senza necessità di vincoli al framework o modifiche specifiche dell'interfaccia.[1] La piattaforma offre una libreria di benchmark standard, tra cui **SWE-bench Verified**, **SWE-bench Lite**, **Terminal-Bench**, **HumanEval**, **MBPP**, **MATH** e **GPQA**, oppure consente benchmark personalizzati.[1] Configura il numero di istanze parallele e avvia le esecuzioni direttamente dall'interfaccia.[1] I risultati acquisiscono metriche dettagliate come punteggi, traiettorie, utilizzo dei token, latenza e dati personalizzati, il tutto centralizzato in una dashboard del team ricercabile.[1] Le esecuzioni sono contrassegnate dall'hash di commit per una facile riproducibilità e confronto tra le versioni.[1] Questa configurazione semplifica la **valutazione degli agenti AI**, i **flussi di lavoro di benchmarking** e il monitoraggio delle prestazioni per i team di tecnici.[1][9]
Esclusione di responsabilità: WebCatalog non è affiliata, associata, autorizzata, approvata né in alcun modo ufficialmente collegata a BenchSpan. Tutti i nomi dei prodotti, i loghi e i marchi sono di proprietà dei rispettivi titolari.
