คะแนนการดีบักของ Claude Fable 5 ลดลงจาก 86.2 เป็น 25.9 ในวันที่ 1 กรกฎาคม แต่ Arena.AI แสดงให้เห็นว่าประสิทธิภาพทรงตัว

จากข้อมูลของ BridgeBridgeBridgeBridgebering จาก BridgeBench คะแนนการแก้จุดบกพร่องของ Claude Fable 5 ลดลงจาก 86.2 เหลือ 25.9 หลังจากที่ถูกนำกลับมาใช้ใหม่อีกครั้งในวันที่ 1 กรกฎาคม โดยคะแนนการปรับโครงสร้างโค้ดลดลงจาก 73.6 เหลือ 38.4 อย่างไรก็ตาม การลดลงดังกล่าวสะท้อนถึงตัวแยกประเภทความปลอดภัยใหม่ของ Anthropic ที่ส่งภารกิจเขียนโค้ดส่วนใหญ่ไปยัง Claude Opus 4.8 ไม่ใช่การเสื่อมประสิทธิภาพของโมเดล จากภารกิจแก้จุดบกพร่อง 12 ภารกิจ มีเพียงสามภารกิจเท่านั้นที่ไปถึง Fable 5 โดยตัวแยกประเภทสกัดกั้นไว้เก้าภารกิจตามการออกแบบเพื่อป้องกันการโจมตีแบบ jailbreak

การทดสอบความชอบของมนุษย์แบบคู่ขนานของ Arena.AI ผ่านคะแนนโหวตแบบไม่เปิดเผยหลายพันคะแนนพบว่าประสิทธิภาพของ Fable 5 ส่วนใหญ่ไม่เปลี่ยนแปลงหลังจากการนำกลับมาใช้ใหม่ โดยคะแนนเอกสารเพิ่มขึ้น 34 จุด และคะแนนข้อความผู้เชี่ยวชาญเพิ่มขึ้น 25 จุด ผู้ใช้ทั่วไปที่ทำงานด้านการเขียนเชิงสร้างสรรค์ การวิจัย และการวิเคราะห์มักจะสังเกตเห็นผลกระทบเพียงเล็กน้อย ในขณะที่นักพัฒนาที่ทำงานกับโค้ดที่เกี่ยวข้องกับความปลอดภัยต้องเผชิญกับการเปลี่ยนเส้นทางแบบ fallback บ่อยครั้ง Anthropic ยอมรับว่าตัวแยกประเภทในปัจจุบันจับข่ายกว้างเกินไป แต่ไม่ได้ให้กรอบเวลาสำหรับการปรับปรุง