AI โมเดลบางตัวเพิ่มคะแนน benchmark แต่ไม่สะท้อนประสิทธิภาพจริง ผู้ใช้ชุมชนตั้งคำถาม
ผู้ใช้ชุมชน r/artificial ชี้ให้เห็นว่าโมเดล AI หลายตัวมีคะแนน benchmark สูงขึ้นในแต่ละเวอร์ชัน แม้บางกรณีไม่มีการพัฒนาที่ชัดเจน เช่น Opus 5 ทำคะแนนเหนือ Fable หรือ GPT Sol 6.1 ทับ Astra ซึ่งสร้างความสงสัยว่าการเพิ่มคะแนนเป็นเพียงการปรับแต่งตัวเลขหรือไม่ ขณะที่บาง benchmark เป็นแบบปิดตัวทำให้ตรวจสอบไม่ได้ทั้งหมด ประเด็นนี้ส่งผลต่อการตัดสินใจเลือกใช้โมเดลในตลาด โดยเฉพาะผู้ที่พึ่งพา benchmark ในการเปรียบเทียบประสิทธิภาพ การที่โมเดลสามารถปรับปรุง benchmark ได้โดยไม่ต้องพัฒนาทักษะจริงอาจเกิดจากวิธีฝึกฝนที่เน้นการปรับแต่งตัวเลขแทนการเพิ่มความสามารถทำงานจริง ทำให้เกิดความสับสนในวงการ AI ดังนั้นความโปร่งใสของ benchmark จึงเป็นสิ่งสำคัญ เพราะการเพิ่มคะแนนอาจไม่สะท้อนประสิทธิภาพจริง แต่เป็นผลจากการปรับแต่งระบบภายในที่ซับซ้อน