กลุ่มวิจัยเชิงวิชาการที่อยู่เบื้องหลัง Chatbot Arena ซึ่งเป็นแพลตฟอร์มที่ได้รับการติดตามอย่างกว้างขวางสำหรับการจัดอันดับโมเดลปัญญาประดิษฐ์ได้จัดตั้ง บริษัท ที่เป็นทางการ Arena Intelligence Inc. ซึ่งจะดำเนินการภายใต้ชื่อแบรนด์ lmarena
ตามรายละเอียดใน wei-lin chiang ข้างๆศาสตราจารย์ UC Berkeley target=”_ blank”> ion stoica ผู้ร่วมก่อตั้ง Databricks และ anyscale.
จากโครงการมหาวิทยาลัยสู่อุตสาหกรรมหลัก
เปิดตัวในช่วงต้นปี 2023 Lab คอมพิวเตอร์ โดยนักวิจัยจากหลายสถาบัน Chatbot Arena ได้รับความโดดเด่นอย่างรวดเร็วในภาค AI
มันเสนอวิธีการใหม่ในการประเมินแบบจำลองภาษาขนาดใหญ่โดยการตอบรับของมนุษย์ผ่านการเปรียบเทียบแบบตัวต่อตัว ผู้ใช้โต้ตอบกับสองรุ่นที่ไม่ระบุชื่อพร้อมกันและลงคะแนนสำหรับการตอบสนองที่ต้องการสร้างการจัดอันดับที่ใช้ ELO แบบไดนามิก (วิธีที่ใช้กันทั่วไปในการหมากรุกเพื่อให้คะแนนระดับทักษะของผู้เล่น)
ระบบนี้สร้างกระดานผู้นำสาธารณะที่มีอิทธิพล Major AI Labs เช่น Openai, Google และมานุษยวิทยาใช้แพลตฟอร์มบางครั้งถึงกับใช้เป็นพื้นที่ทดสอบสำหรับรุ่นที่ยังไม่เผยแพร่ Angelopoulos ระบุว่าวิสัยทัศน์พื้นฐานยังคงที่:“ วิสัยทัศน์ของเราคือสิ่งนี้จะยังคงเป็นสถานที่ที่ทุกคนบนอินเทอร์เน็ตสามารถมาและพยายามแชทและใช้ AI เปรียบเทียบผู้ให้บริการที่แตกต่างกันและอื่น ๆ ”