นักวิจัยคอร์แนลสร้างหูฟังที่สามารถติดตามการแสดงออกทางสีหน้าได้

0
https://o.aolcdn.com/images/dims?thumbnail=640%2C&quality=95&image_uri=https%3A%2F%2Fs.yimg.com%2Fos%2Fcreatr-uploaded-images%2F2020-10%2Fb37b9ea0-0cb1-11eb-b92e-872d61cea77f&client=amp-blogside-v2&signature=718022ae02bb1af9a6fdb08fe5879e4f286c68ea

นักวิจัยจากมหาวิทยาลัยคอร์แนลได้สร้างระบบหูฟังที่สามารถติดตามการแสดงออกทางสีหน้า (facial expression) ของผู้สวมใส่ได้แม้ว่าพวกเขาจะสวมหน้ากากอยู่ก็ตาม ซึ่งระบบ C-Face นั้นสามารถติดตามรูปทรงแก้มแล้วเปลี่ยนให้กลายเป็นการแสดงออกทางสีหน้าของผู้สวมใส่ให้เป็นอีโมจิได้

ตัวอย่างการใช้งานคือสิ่งนี้จะทำให้ผู้ใช้สามารถถ่ายทอดความรู้สึกได้ระหว่างสนทนาเป็นกลุ่มโดยที่ไม่ต้องเปิดเว็บแคมเลยก็ได้ เป็นต้น

อุปกรณ์นี้เรียบง่าย ไม่เกะกะและมีความสามารถมากกว่าเทคโนโลยีสวมใส่ติดหูที่มีอยู่เพื่อติดตามการแสดงออกทางสีหน้าได้” คุณ Cheng Zhang ผู้อำนวยการแห่งห้องปฏิบัติการ SciFi Lab แห่งคอร์แนลและผู้เขียนงานตีพิมพ์อาวุโสของ C-Face กล่าว “ในเทคโนโลยีสวมใส่ก่อนหน้านี้นั้นมุ่งหวังที่จะรู้จำการแสดงออกทางสีหน้า ซึ่งโซลูชันส่วนใหญ่ต้องมีการติดเซ็นเซอร์บนใบหน้าและต้องมีอุปกรณ์ต่างๆ มากมาย และมันอาจจะรู้จำสีหน้าได้แบบจำกัดอีกด้วย”

หูฟังนี้ใช้กล้อง RGB 2 ตัวที่วางไว้ด้านล่างของหูแต่ละฝั่ง ซึ่งอุปกรณ์จะบันทึกการเปลี่ยนแปลงของรูปทรงแก้มเมื่อกล้ามเนื้อใบหน้าของผู้สวมใส่เริ่มเคลื่อนไหว โดยภาพต่างๆ จะถูกนำมาสร้างขึ้นใหม่โดยใช้โมเดล Computer Vision และ Deep Learning เพื่อวิเคราะห์ภาพสองมิติ ซึ่งเทคโนโลยีสามารถแปลความหมายจากจุดฟีเจอร์ใบหน้า 42 จุดให้กลายเป็นตำแหน่งและรูปร่างของปาก ตา และคิ้วผู้สวมใส่ได้

C-Face สามารถแปลงการแสดงออกทางสีหน้าเหล่านั้นให้กลายเป็นอีโมจิได้ 8 แบบ ซึ่งภายในนั้นก็มีใบหน้าที่เป็นกลางหรือโกรธด้วย ทั้งนี้ระบบยังสามารถทำให้ผู้ใช้ใช้ใบหน้าในการควบคุมตัวเลือกให้เล่นเพลงบนแอปได้อีกด้วย ส่วนการใช้งานที่เป็นไปได้แบบอื่นๆ นั้นเช่นการสร้างอวตารภายในเกมหรือการตั้งค่าเสมือนเพื่อแสดงอารมณ์ของผู้เล่นได้ หรือครูก็อาจจะสามารถใช้เพื่อติดตามได้ว่านักเรียนมีการเข้าร่วมคลาสมากน้อยแค่ไหนในช่วงระหว่างที่คลาสเรียนเป็นแบบรีโมทออนไลน์อยู่ เป็นต้น

Source : https://www.engadget.com/earphone-facial-expression-mask-emoji-emotion-175327792.html