Opper เปิดตัว Jevman ให้ AI ตัดสินใจแข่งเกมแพคแมนวัดประสิทธิภาพแบบเรียลไทม์
บริษัทผู้ให้บริการ API สำหรับ AI เปิดตัวเบนช์มาร์กโอเพนซอร์สให้ปัญญาประดิษฐ์หลากหลายรุ่นมาแข่งขันเล่นเกมแพคแมนเพื่อวัดความเร็วในการตัดสินใจ
Opper บริษัทผู้ให้บริการ API สำหรับ AI ได้เปิดตัวโปรเจกต์โอเพนซอร์สที่มีชื่อว่า Jevman บนแพลตฟอร์ม GitHub เพื่อใช้เป็นเกณฑ์มาตรฐาน (Benchmark) ในการทดสอบประสิทธิภาพด้านการตัดสินใจ (Decision-making) และความเร็วในการตอบสนองแบบเรียลไทม์ของโมเดลปัญญาประดิษฐ์ต่างๆ ผ่านการจำลองให้ AI เล่นเกมแพคแมน (Pac-Man) แข่งกับบอทผีในเกม
ในระบบการทดสอบนี้ โมเดล AI จะได้รับข้อมูลสถานะของเกมในรูปแบบ JSON ซึ่งประกอบด้วยโครงสร้างเขาวงกต ตำแหน่งของจุดเก็บคะแนน และตำแหน่งของผี ก่อนจะทำการประมวลผลและตัดสินใจเลือกทิศทางเดิน โดยมีกฎกติกาที่เข้มงวดเรื่องเวลาจำกัดในการตอบสนองแบบเรียลไทม์ เพื่อทดสอบความสามารถในการรับมือกับสถานการณ์ที่เปลี่ยนแปลงอยู่ตลอดเวลา
การทดสอบรอบแรกทางผู้พัฒนาได้นำโมเดลหลากหลายรุ่นมาร่วมแข่งขันรวม 100 เกมต่อหนึ่งโมเดล พร้อมทั้งจัดทำกระดานผู้นำ (Leaderboard) เผยแพร่ไว้ให้ผู้สนใจได้ตรวจสอบผลลัพธ์ โมเดลที่ถูกนำมาทดสอบในชุดแรกนี้ประกอบด้วย jev 1.13, kev, clef, clef flash รวมถึง GPT-6 Luna และ Laya โดยแต่ละเกมมีต้นทุนการประมวลผลอยู่ที่ประมาณ 2 เซนต์
นอกจากจะให้ AI แข่งขันกันเองแล้ว โปรเจกต์นี้ยังเปิดโอกาสให้ผู้ใช้งานทั่วไปสามารถเข้าไปลองเล่นเกมแพคแมนด้วยตัวเองได้ โดยมีเหล่า AI ทำหน้าที่เป็นผีคอยไล่ล่า ซึ่งผู้เล่นสามารถเลือกให้เจอโมเดลแบบผสมหรือเลือกเผชิญหน้ากับโมเดลเฉพาะค่ายได้เช่นกัน ทั้งนี้ ทาง Opper ได้เปิดซอร์สโค้ดทั้งหมดเพื่อให้ผู้พัฒนาคนอื่นๆ สามารถนำโมเดลของตนเองเข้ามาร่วมทดสอบและจัดอันดับในระบบได้
สะท้อนให้เห็นวิธีการใหม่ๆ ในการทดสอบความเร็วและความแม่นยำของ AI ภายใต้สถานการณ์จริงที่มีเวลาจำกัด ซึ่งเป็นประโยชน์ต่อผู้พัฒนาที่ต้องการเลือกใช้โมเดลให้เหมาะสมกับงานที่ต้องการการตัดสินใจทันที