SciArena

未安装 WebCatalog Desktop？下载 WebCatalog Desktop。

SciArena是开放平台，基于Semantic Scholar语料，通过匿名对比与用户投票，评测并排名基础语言模型在生成科学文献综述和回答研究问题方面的能力。

使用 WebCatalog Desktop 上“SciArena”的 Mac、Windows 版桌面应用增强您的体验。

AI2推出了SciaRena，这是一个聊天机器人竞技场风格的平台，以基准AI进行科学的AI。初始发现Crown Openai的O3是表现最佳的人，尤其是在工程等技术领域。

Sciarena是一个实验平台，旨在根据其从科学文章数据库中生成文学评论的能力来评估和比较基础语言模型。它利用了语义学者的大规模语料库，该语义学者在多个学科中拥有超过2亿个科学文章。该平台允许对研究问题的模型生成答案的匿名比较，用户投票有助于持续的排行榜排名。

该工具利用了改编自学者质量检查的信息检索机制，将数据取出到随机选择的模型，以产生文献审查式答案。该设置可以评估不同模型在综合和总结科学文献中的性能。尽管SciaRena使用良好的学术数据提供了对模型功能的见解，但它受到拖延索引最近出版物的延迟，每年大致更新。

关键功能包括无偏评估的匿名模型比较，与语义学者的综合科学存储库集成以及挤满质量判断的投票系统。 SciaRena通过为从事学术内容生成和审查任务的语言模型提供透明的基准测试环境来支持研究和AI开发。它是一个免费的开放平台，可促进科学领域中正在进行的基础模型评估。

此描述由 AI（人工智能）生成。AI 可能会犯错。请检查重要信息。

免责声明：WebCatalog 与“SciArena”没有任何附属、关联、授权、认可关系，也没有以任何方式正式关联。所有产品名称、徽标和品牌均为其各自所有者的财产。

您可能还会喜欢