นักวิจัยได้พัฒนาแบบจำลองมาตรฐานเพื่อวัดประสิทธิภาพของหุ่นยนต์ฮิวมานอยด์ภายใต้แรงทางกายภาพที่สมจริง ซึ่งเผยให้เห็นช่องว่างด้านประสิทธิภาพที่ซ่อนอยู่ และเป็นการวางรากฐานที่แข็งแกร่งยิ่งขึ้นสำหรับการประเมินผลในอนาคต

นักวิจัยได้นำเสนอ ThorArena ควบคู่ไปกับคะแนนการติดตามที่คำนึงถึงแรง (FATS) เพื่อประเมินว่าหุ่นยนต์ฮิวมานอยด์รับมือกับปฏิสัมพันธ์ทางกายภาพที่สมจริงได้ดีเพียงใด แทนที่จะเป็นสภาวะในห้องปฏิบัติการที่สมบูรณ์แบบ เกณฑ์มาตรฐานนี้ ซึ่งอธิบายไว้ในเอกสารฉบับร่างล่าสุด มีจุดมุ่งหมายเพื่อให้ได้มาซึ่งการวัดประสิทธิภาพของหุ่นยนต์ที่แม่นยำยิ่งขึ้นในระหว่างการทำงานประจำวันที่เกี่ยวข้องกับแรงภายนอก
วิธีการประเมินในปัจจุบันมักมุ่งเน้นไปที่การเคลื่อนไหวในสภาพแวดล้อมที่ปราศจากสิ่งกีดขวาง ซึ่งหุ่นยนต์จะเผชิญกับแรงต้านเพียงเล็กน้อยหรือไม่มีเลย แม้ว่าการทดสอบดังกล่าวจะวัดการเคลื่อนที่และการทรงตัวได้ แต่ก็มักไม่สามารถวัดประสิทธิภาพของเครื่องจักรเมื่อต้องยก ผลัก ดึง หรือแบกวัตถุได้ ส่งผลให้หุ่นยนต์ที่ดูเหมือนจะมีความสามารถในการประเมินแบบเดิม อาจประสบปัญหาเมื่อต้องเผชิญกับแรงในโลกแห่งความเป็นจริง
เพื่อแก้ไขข้อจำกัดนี้ ทีมวิจัยได้รวบรวมข้อมูลจากอาสาสมัครที่สวมชุดหูฟังเสมือนจริงและอุปกรณ์ติดตามการเคลื่อนไหวขณะทำภารกิจทั่วไป เครื่องมือมือที่มีเซ็นเซอร์พิเศษบันทึกทิศทางและขนาดของแรงที่ใช้ในระหว่างกิจกรรมแต่ละครั้ง จากนั้นจึงจำลองการวัดเหล่านี้ในโปรแกรมจำลองทางฟิสิกส์ ทำให้หุ่นยนต์ฮิวมานอยด์เสมือนจริงสามารถกระทำการเดียวกันภายใต้สภาวะแรงที่สมจริงได้
หุ่นยนต์ได้รับการประเมินโดยใช้ FATS ซึ่งวัดความแม่นยำในการติดตามและเสถียรภาพขณะโต้ตอบกับแรงภายนอก ระบบควบคุมหุ่นยนต์ฮิวมานอยด์ที่เป็นตัวแทนสี่ระบบได้รับการทดสอบ แม้ว่าทั้งหมดจะทำงานได้ดีในสถานการณ์ที่ไม่มีแรงกระทำ แต่ก็มีความแตกต่างที่ชัดเจนเกิดขึ้นเมื่อมีการนำแรงที่สมจริงเข้ามาใช้ ระบบหนึ่งรักษาความสมดุลได้ดีกว่าอย่างสม่ำเสมอและได้คะแนนโดยรวมสูงสุด ซึ่งชี้ให้เห็นถึงจุดอ่อนที่เกณฑ์มาตรฐานทั่วไปไม่สามารถระบุได้
นักวิจัยเชื่อว่าเกณฑ์มาตรฐานนี้จะช่วยปรับปรุงการพัฒนาหุ่นยนต์ฮิวมานอยด์ที่ใช้ในโรงงาน โกดัง และสถานที่ทำงานอื่นๆ ที่การปฏิสัมพันธ์ทางกายภาพเป็นสิ่งที่หลีกเลี่ยงไม่ได้ ในอนาคตจะมีการขยายชุดข้อมูลเพิ่มเติมด้วยภารกิจต่างๆ และเงื่อนไขแรงที่หลากหลายมากขึ้น ก่อนที่จะนำกรอบการประเมินไปใช้กับแพลตฟอร์มหุ่นยนต์ในโลกแห่งความเป็นจริง