Galactica: โมเดลภาษาและการวิจัยของ Meta
ที่ Meta เราเชื่อว่าวิธีการเพื่อพัฒนาการวิจัย AI คือผ่านกระบวนการที่เปิด เฉลย และสามารถผลิตซ้ำได้ เรายังเชื่อด้วยว่าความก้าวหน้าจะดีที่สุดเมื่อเชิญชุมชนกว้างและหลากหลายมาร่วมและให้ข้อเสนอแนะ งานวิจัย Galactica ผ่านเอกสาร วิธีแบบจำลอง โค้ด และการสาธิตที่เกี่ยวข้องนั้นหมายสำหรับชุมชนวิจัยและไม่ได้ถูกใช้ในการผลิต
เมื่อเปิดตัว เราได้ระบุข้อจำกัดที่มาพร้อมกับโมเดลภาษาใหญ่เช่น Galactica รวมถึงความเป็นไปได้ที่จะสร้างผลลัพธ์ที่ไม่ถูกต้องและไม่น่าเชื่อถือ แม้ว่า Galactica จะได้รับการฝึกด้วยข้อมูลวิทยาศาสตร์และวิชาการที่มีคุณภาพสูง เราเชื่อว่ามันสำคัญสำหรับสาธารณะที่จะเข้าใจจุดแข็งและจุดอ่อนของโมเดลภาษาเหล่านี้ในวิธีที่เปิดและเฉลย
เรายังเชื่อว่านี่เป็นวิธีที่ดีที่สุดเพื่อรับข้อเสนอแนะในระบบเหล่านี้และเรียนรู้วิธีลดจุดอ่อน อย่างไรก็ตาม เนื่องจากความโน้มเอียงของโมเดลภาษาใหญ่เช่น Galactica ในการสร้างข้อความที่อาจดูจริง แต่ไม่ถูกต้อง และเนื่องจากมันได้ย้ายออกจากชุมชนวิจัย เราเลือกที่จะลบการสาธิตจากการเข้าถึงของสาธารณะ โมเดลของเรายังคงพร้อมสำหรับนักวิจัยที่ต้องการเรียนรู้เพิ่มเติมเกี่ยวกับงานและผลิตผลลัพธ์ในเอกสาร
