ระบบ AI ทำให้นักบาส NBA เต้นได้บนหน้าจอขนาดยักษ์

0
https://news.developer.nvidia.com/ai-helps-nba-players-dance-on-the-jumbotron/

คุณคิดว่าคุณเต้นได้ไหม? โดยในช่วงต้นเดือนที่แล้วนั้น ทีมบาสเกตบอล Dallas Mavericks ใน NBA นั้นได้แสดงให้เห็นถึงศักยภาพของระบบ deep learning ที่สามารถทำโชว์เพื่อความบันเทิงระหว่างเกมได้ โดยสามารถสังเคราะห์วีดีโอให้นักกีฬาบาสเกตบอลคนหนึ่งของทีมแสดงท่าเต้นบนหน้าจอขนาดยักษ์ได้แล้ว

โดยสตาร์ทอัพจากรัฐเท็กซัส Xpire AI ที่ก่อตั้งขึ้นมาร่วมกับเจ้าของทีมบาสเกตบอลคุณ Mark Cuban นี้เอง ซึ่งได้นำเอาเทคโนโลยีใหม่จากนักวิจัย NVIDIA ที่มีชื่อว่า pix2pixHD โดยจะเป็นเฟรมเวิร์กในการทำ Conditional GAN ตัวหนึ่งสำหรับการแปลงจากภาพหนึ่งไปเป็นอีกภาพได้ (image-to-image translation)

เพื่อที่จะสร้างข้อมูลสำหรับเทรนโครงข่าย Deep Convolutional Generative Adversarial Network (DCGAN) นั้น ทางวิศวกรใช้วิธีบันทึกภาพวีดีโอการเคลื่อนไหวของร่างกายของนักกีฬาคุณ Jalen Brunson ขึ้นมา ซึ่งวีดีโอสั้นๆ สามารถนำไปใช้เทรนได้โดยการคัดแยกท่าทางตำแหน่งการวางตัวในแต่ละเฟรมออกมา เพื่อสร้างเป็นภาพ skeleton ของแต่ละท่าโพสออกมาได้

https://news.developer.nvidia.com/wp-content/uploads/2019/03/Dallas-Mavericks-training-video.gif
วีดีโอเพื่อใช้สำหรับการเทรน

“และตอนนี้พวกเราก็สามารถจับคู่ภาพระหว่างภาพ skeleton กับภาพจริงๆ ได้ โดยพวกเราสามารถเทรนโครงข่ายเพื่อจับคู่ระหว่างภาพข้อมูลเข้ากับภาพที่จะออกมาได้” สตาร์ทอัพอธิบายไว้ในบล็อคเทคโนโลยีเกี่ยวกับกระบวนการดังกล่าว “หลังจากเทรนไปหลายชั่วโมงแล้ว พวกเราก็ได้โมเดลที่สามารถจับคู่ข้อมูลภาพท่าโพสต่างๆ แล้วทำให้ออกมาเป็ภาพ output ที่เสมือนจริงได้” ซึ่งโมเดลที่เทรนได้มานี้ทำให้ทางทีมสามารถสร้างวีดีโอการเต้นของคุณ Jalen ที่ดูสมจริงและไม่เคยเห็นที่ไหนมาก่อน

https://news.developer.nvidia.com/wp-content/uploads/2019/03/Dallas-Mavericks-pix2pix-1.gif
ผลลัพธ์ที่คุณ Jalen เต้น