SciArena

SCIARENA เป็นแพลตฟอร์มการทดลองที่ออกแบบมาสำหรับการประเมินและเปรียบเทียบแบบจำลองภาษาพื้นฐานตามความสามารถในการสร้างความคิดเห็นวรรณกรรมจากฐานข้อมูลบทความทางวิทยาศาสตร์ มันใช้คลังข้อมูลขนาดใหญ่จาก Semantic Scholar ซึ่งจัดทำบทความทางวิทยาศาสตร์กว่า 200 ล้านเรื่องในหลายสาขาวิชา แพลตฟอร์มดังกล่าวช่วยให้การเปรียบเทียบคำตอบแบบจำลองที่สร้างขึ้นโดยไม่ระบุชื่อโดยไม่ระบุชื่อของคำถามที่สร้างขึ้นจากแบบจำลองสำหรับคำถามการวิจัยด้วยการลงคะแนนเสียงของผู้ใช้ที่มีส่วนร่วมในการจัดอันดับลีดเดอร์บอร์ดอย่างต่อเนื่อง

เครื่องมือนี้ใช้ประโยชน์จากกลไกการดึงข้อมูลที่ดัดแปลงมาจาก Scholar QA การให้อาหารที่ดึงข้อมูลไปยังแบบจำลองที่เลือกแบบสุ่มซึ่งสร้างคำตอบในการทบทวนวรรณกรรม การตั้งค่านี้ช่วยให้การประเมินประสิทธิภาพของโมเดลที่แตกต่างกันในการสังเคราะห์และสรุปวรรณกรรมทางวิทยาศาสตร์ ในขณะที่ SCIARENA ให้ข้อมูลเชิงลึกเกี่ยวกับความสามารถของแบบจำลองโดยใช้ข้อมูลทางวิชาการที่ได้รับการยอมรับเป็นอย่างดี แต่ก็ถูก จำกัด ด้วยความล่าช้าในการจัดทำดัชนีสิ่งพิมพ์ล่าสุดโดยประมาณเป็นประจำทุกปี

คุณสมบัติที่สำคัญรวมถึงการเปรียบเทียบแบบจำลองที่ไม่ระบุชื่อสำหรับการประเมินที่ไม่เอนเอียงการรวมเข้ากับพื้นที่เก็บข้อมูลทางวิทยาศาสตร์ที่ครอบคลุมของ Semantic Scholar และระบบการลงคะแนนที่มีการตัดสินคุณภาพ SCIARENA สนับสนุนการวิจัยและการพัฒนา AI โดยการจัดหาสภาพแวดล้อมการเปรียบเทียบที่โปร่งใสสำหรับแบบจำลองภาษาที่มีส่วนร่วมในการสร้างเนื้อหาทางวิชาการและงานทบทวน มันทำงานเป็นแพลตฟอร์มที่เปิดฟรีและอำนวยความสะดวกในการประเมินแบบจำลองพื้นฐานอย่างต่อเนื่องในโดเมนวิทยาศาสตร์

คำอธิบายนี้สร้างโดย AI (ปัญญาประดิษฐ์) AI อาจทำข้อผิดพลาดได้ โปรดตรวจสอบข้อมูลสำคัญ

เว็บไซต์: sciarena.allen.ai

ข้อความปฏิเสธความรับผิดชอบ: WebCatalog ไม่ได้ประกอบกิจการร่วม ไม่ได้รับอนุญาต ไม่ได้รับการรับรองโดยหรือเชื่อมโยงกับ SciArena อย่างเป็นทางการไม่ว่าในทางหนึ่งทางใด ชื่อผลิตภัณฑ์ โลโก้ และแบรนด์ทั้งหมด เป็นทรัพย์สินของเจ้าของที่เกี่ยวข้อง