บทสนทนาในเกม Cyberpunk 2077 ถูกลิปซิงค์ด้วยระบบ AI

0
https://o.aolcdn.com/images/dims?thumbnail=640%2C&quality=95&image_uri=https%3A%2F%2Fs.yimg.com%2Fos%2Fcreatr-uploaded-images%2F2020-10%2F21329300-12e7-11eb-b7ff-e7af6fbb4961&client=amp-blogside-v2&signature=1fbf2f80d109389438cd6fcbb546e2ec76fc5ef7

Cyberpunk 2077 นั้นเตรียมจะออกมาในอีกไม่กี่สัปดาห์ที่จะถึงนี้ ซึ่งเป็นเกมแนว RPG ที่จะเปิดตัวให้รองรับตัวเลือกบทพูดและคำบรรยายได้ถึง 10 ภาษา ซึ่ง CD Projekt Red ผู้พัฒนาเกมมีเป้าหมายที่จะเพิ่มชั้นทึ่ลึกขึ้นสำหรับผู้เล่นโดยใช้ระบบ AI ในการลิปซิงค์บทสนทนาในแต่ละภาษา

ผู้อำนวยการทางเทคนิคของตัวละครในเกม คุณ Mateusz Popławski กล่าว (ผ่าน Twitter @shinobi602) ว่า ทาง CDPR มุ่งหวังที่จะทำให้คุณภาพการลิปซิงค์ให้ดีกว่า The Witcher 3 ซึ่งต้องการที่จะทำทั้ง 10 ภาษาได้แก่ ภาษาอังกฤษ เยอรมัน สเปน ฝรั่งเศส อิตาเลียน โปแลนด์ โปรตุเกสแบบบราซิล รัสเซีย จีน และญี่ปุ่น

เป้าหมายคือการทำกับทุกๆ ตัวละครทั้งหมด และด้วยตัวเกมนั้นมีขอบเขตขนาดใหญ่ ทาง CDPR จึงต้องทำทุกอย่างโดยที่ไม่มีการจับการเคลื่อนไหวของใบหน้า (facial motion capture) ใดๆ แต่ไปใช้วิธีการลิปซิงค์ของ Jali Research และเทคโนโลยี facial animation เพื่อทำให้สามารถสร้างการเคลื่อนไหวใบหน้าของตัวละครออกมา

ตัวละคนบางตัวใน Cyberpunk 2077 นั้นสามารถพูดได้หลายภาษา ซึ่งบางครั้งอาจมีการเปลี่ยนภาษาภายในประโยคเดียวกันด้วย เพื่อจัดการกับปัญหาดังกล่าวจึงต้องมีการติดแท็กบนเสียง ซึ่งแท็กนั้นยังช่วยให้ปรับเปลี่ยนการแสดงออกทางสีหน้า (facial expression) ของตัวละครเมื่อสถานะอารมณ์เปลี่ยนแปลงไปในบทสนทนาได้ด้วย ซึ่งระบบยังใช้การวิเคราะห์เสียงเพื่อจำลองอารมณ์ของผู้ให้เสียงลงไปในอนิเมชันด้วย

Source : https://www.engadget.com/cyberpunk-2077-dialogue-language-lip-sync-artificial-intelligence-dubbing-154523977.html