SciArena

Sciarena je eksperimentalna platforma dizajnirana za procjenu i usporedbu modela jezika temeljenih na temelju njihove sposobnosti generiranja pregleda literature iz baza podataka znanstvenih članaka. Koristi veliki korpus od Semantic Scholar-a, koji je domaćin više od 200 milijuna znanstvenih članaka u više disciplina. Platforma omogućava anonimnu usporedbu odgovora na istraživačka pitanja koja su generirala model, a glasovi korisnika doprinose tekućem rangu vodećih ploča.

Alat koristi mehanizam za pronalaženje informacija prilagođen od znanstvenika QA, hranjenje preuzeo podatke nasumično odabranim modelima koji proizvode odgovore u stilu literature. Ova postavka omogućava procjenu performansi različitih modela u sintetiziranju i sažetku znanstvene literature. Iako Sciarena pruža uvid u mogućnosti modela koristeći dobro utvrđene znanstvene podatke, ograničena je kašnjenjem u indeksiranju vrlo nedavnih publikacija, ažurirajući se otprilike godišnje.

Ključne značajke uključuju anonimnu usporedbu modela za nepristranu evaluaciju, integraciju s sveobuhvatnim znanstvenim spremištem Semantic Scholar -a i sustav glasanja koji prerađuje kvalitetne prosudbe. Sciarena podržava istraživanje i razvoj AI pružajući transparentno usporedno okruženje za jezične modele koji se bave akademskim generiranjem sadržaja i zadacima za pregled. Djeluje kao besplatna, otvorena platforma koja olakšava tekuću procjenu utemeljenih modela u znanstvenim domenama.

Ovaj opis generirala je umjetna inteligencija (AI). AI može pogriješiti. Provjerite važne informacije.

Web stranica: sciarena.allen.ai

Odricanje odgovornosti: WebCatalog nije povezan, pridružen, ovlašten, odobren ili na bilo koji način službeno povezan s SciArena. Sva imena proizvoda, logotipi i brendovi vlasništvo su njihovih odgovarajućih vlasnika.