เราคงชินกับการเห็นตัว avatar ทำท่าเลียนแบบการเล่นเปียโน สีไวโอลินแบบง่ายๆ แต่ตอนนี้ทาง Facebook กำลังทำการประยุกต์ใช้เพียงเสียงดนตรีมาควบคุมการเคลื่อนไหวของ AR Avatar พูดง่ายๆ ก็คือว่า แค่ใส่เพลงเข้าไปแล้วตัว avatar ก็จะทำท่าเหมือนกับนักเปียโนหรือนักไวโอลินได้เลย
งานวิจัยจากความร่วมมือกับ University of Washington และ Stanford ได้รับการนำเสนอจาก Facebook ที่งานประชุม Computer Vision and Pattern Recognition (CVPR) ซึ่งทีมวิจัยต้องการศึกษาว่าการเคลื่อนไหวของร่างกายตามธรรมชาติจะถูกคาดการณ์ได้จากดนตรีหรือไม่ แม้ว่าผลของแอนิเมชันที่ได้ออกมาอาจดูเรียบง่ายและกระตุกอยู่บ้าง ทางทีมวิจัยก็จะยังคงพัฒนาต่อไปโดยจะลงรายละเอียดในส่วนย่อยๆ เช่น การเคลื่อนไหวของแขนและนิ้วมือ
นับเป็นครั้งแรกที่มีคนพยายามทำนายการเคลื่อนไหวทางร่างกายจากการใช้เสียงดนตรีเพียงอย่างเดียว ถือว่าเป็นงานวิจัยด้าน AR ที่น่าสนใจอีกชิ้นหนึ่ง และสามารถนำไปประยุกต์ใช้ได้กว้างขวาง ไม่ใช่เฉพาะแต่ด้านเกมเท่านั้น แต่รวมไปถึงในชีวิตจริงด้วย ยกตัวอย่างเช่น หากคุณต้องการเล่นเปียโนสักเพลง คุณก็สามารถป้อนข้อมูลเสียงและเลียนแบบการเล่นจาก avatar นักเปียโนได้ ฟังดูแล้วน่าจะสนุกกว่าบทเรียนเกรด 7 ที่คุณถูกบังคับเรียนเสียอีก
