SciArena

Sciarena adalah platform eksperimen yang direka untuk menilai dan membandingkan model bahasa asas berdasarkan keupayaan mereka untuk menjana ulasan sastera dari pangkalan data artikel saintifik. Ia menggunakan korpus berskala besar dari Sarjana Semantik, yang menganjurkan lebih daripada 200 juta artikel saintifik merentasi pelbagai disiplin. Platform ini membolehkan perbandingan sampingan tanpa nama mengenai jawapan yang dihasilkan oleh model kepada soalan penyelidikan, dengan undi pengguna yang menyumbang kepada kedudukan pendahulu yang berterusan.

Alat ini memanfaatkan mekanisme pengambilan maklumat yang disesuaikan daripada Scholar QA, memberi makan data yang diambil ke model yang dipilih secara rawak yang menghasilkan jawapan gaya kajian literatur. Persediaan ini membolehkan penilaian prestasi model yang berbeza dalam mensintesis dan meringkaskan kesusasteraan saintifik. Walaupun Sciarena memberikan pandangan ke dalam keupayaan model menggunakan data ilmiah yang mantap, ia terhad oleh kelewatan dalam mengindeks penerbitan yang sangat baru-baru ini, mengemas kini kira-kira setiap tahun.

Ciri -ciri utama termasuk perbandingan model tanpa nama untuk penilaian yang tidak berat sebelah, integrasi dengan repositori saintifik yang komprehensif Sarjana Semantik, dan sistem pengundian yang menghakimi penghakiman yang berkualiti. Sciarena menyokong penyelidikan dan pembangunan AI dengan menyediakan persekitaran penandaarasan yang telus untuk model bahasa yang terlibat dalam penjanaan kandungan akademik dan tugas kajian semula. Ia beroperasi sebagai platform terbuka dan terbuka yang memudahkan penilaian model asas yang berterusan dalam domain saintifik.

Penerangan ini dijana oleh AI (kecerdasan buatan). AI boleh membuat kesilapan. Semak maklumat penting.

Laman web: sciarena.allen.ai

Penafian: WebCatalog tidak terafiliasi, berkaitan, diberi kuasa, atau disahkan oleh ataupun dalam apa jua cara yang berkaitan dengan SciArena. Semua nama produk, logo, dan jenama ialah hak milik pemilik masing-masing.