ข่าวบ้านไอที เมื่อวันที่ 2 พฤศจิกายน Los Angeles Times เผยแพร่บล็อกโพสต์เมื่อวานนี้ (1 พฤศจิกายน) โดยรายงานว่าทีมวิจัยของ Apple ทดสอบโมเดล AI ที่ทันสมัยที่สุด 20 รุ่น และพบว่าเมื่อมีรายการรบกวน พวกเขาประมวลผลประสิทธิภาพแบบเรียบง่าย ปัญหาทางคณิตศาสตร์ยังย่ำแย่ ถึงขั้นแย่กว่านักเรียนชั้นประถมศึกษาด้วยซ้ำ
Apple ใช้คำถามทางคณิตศาสตร์ง่ายๆ ต่อไปนี้เพื่อทดสอบโมเดล AI ที่ทันสมัยที่สุดมากกว่า 20 แบบได้แนบคำถามมาดังนี้:
โอลิเวอร์เก็บผลกีวี 44 ผลในวันศุกร์ จากนั้นเขาเก็บผลกีวี 58 ผลในวันเสาร์ จำนวนกีวีที่เก็บในวันอาทิตย์เป็นสองเท่าของวันศุกร์ แต่ผลกีวี 5 ผลนั้นน้อยกว่าค่าเฉลี่ยกี่ลูก คุณเลือกไหม?
คำตอบที่ถูกต้องคือ 190 และสูตรการคำนวณคือ 44 (วันศุกร์) + 58 (วันเสาร์) + 88 (44*2 วันอาทิตย์)
อย่างไรก็ตาม แบบจำลอง AI ที่ล้ำสมัยมากกว่า 20 แบบที่ทดสอบไม่สามารถกำจัดสิ่งรบกวนได้ และโดยทั่วไปไม่เข้าใจว่าขนาดและจำนวนกีวีไม่มีส่วนเกี่ยวข้องกับผลลัพธ์ส่วนใหญ่คือ 185 ผล
ทีม Apple พบว่าเมื่อคำถามมีข้อมูลที่ดูเหมือนเกี่ยวข้องแต่จริงๆ แล้วไม่เกี่ยวข้อง ประสิทธิภาพของโมเดล AI ก็ลดลงอย่างมาก งานวิจัยนี้เชื่อว่าแบบจำลอง AI อาศัยรูปแบบภาษาในข้อมูลการฝึกอบรมเป็นหลัก แทนที่จะเข้าใจแนวคิดทางคณิตศาสตร์อย่างแท้จริง
การวิจัยของ Apple แสดงให้เห็นว่าโมเดล AI ในปัจจุบัน "ไม่สามารถให้เหตุผลเชิงตรรกะที่แท้จริงได้" การค้นพบนี้เป็นเครื่องเตือนใจว่าแม้ว่า AI จะเก่งในงานบางอย่าง แต่ความฉลาดของมันก็ไม่น่าเชื่อถือเท่าที่ควร
ทีมงานของ Apple ชี้ให้เห็นว่าการขยายข้อมูลหรือพลังการประมวลผลเพียงอย่างเดียวไม่สามารถแก้ปัญหานี้ได้โดยพื้นฐาน รายงานของ Apple ไม่ได้มีจุดมุ่งหมายเพื่อลดความกระตือรือร้นในความสามารถด้าน AI แต่เพื่อให้เกิดความเข้าใจอย่างมีเหตุผล