Matthew Schwartz นักวิจัยจาก Anthropic ตีพิมพ์บทความในเดือนตุลาคมเกี่ยวกับ BootLoops ซึ่งเป็นเครื่องมือเชื่อมโยงเทคนิคทางวิทยาศาสตร์ โดยชี้ว่าผลลัพธ์แม้ถูกต้องทางคณิตศาสตร์ แต่ต้องผ่านการตรวจสอบโดยผู้เชี่ยวชาญจึงจะมีความหมายทางวิทยาศาสตร์ ความแตกต่างระหว่าง 'คำนวณถูกต้อง' และ 'คำนวณให้รู้สิ่งใหม่' ต้องมีการตรวจสอบที่แตกต่างกัน โค้ดที่ทำซ้ำช่วยตรวจสอบความถูกต้อง แต่ไม่สามารถยืนยันความสำคัญหรือความใหม่ได้เอง ความท้าทายคือการจัดการสองขั้นตอนตรวจสอบโดยไม่ทำให้ผลลัพธ์ที่ไม่สำคัญกลายเป็นข่าวใหญ่ ต้องแยกแยะความสำคัญของผลลัพธ์กับการสื่อสาร Schwartz ระบุว่าตนเองเป็นนักวิจัยที่มาเยี่ยมที่ Anthropic จึงไม่ใช่การประเมินอิสระ ข้อเสนอแนะคือการให้ผู้เชี่ยวชาญระบุสิ่งที่รู้แล้ว ข้อเสนอใหม่ และการสังเกตที่แยกจากคำอธิบายเดิม ก่อนเรียกผลลัพธ์เป็นการค้นพบ ต้องมีการตรวจสอบจากผู้เชี่ยวชาญเพื่อแยกแยะความสำคัญของข้อมูล แม้คำนวณถูกต้องแต่ยังต้องมีความหมายทางวิทยาศาสตร์ ข้อมูลนี้ชี้ให้เห็นความจำเป็นของผู้เชี่ยวชาญในการประเมิน AI ที่ให้ผลลัพธ์
สรุปด้วย MAF Local AI · เนื้อหาต้นฉบับเป็นของแหล่งข่าว