คุณคิดว่าคุณเต้นได้ไหม? โดยในช่วงต้นเดือนที่แล้วนั้น ทีมบาสเกตบอล Dallas Mavericks ใน NBA นั้นได้แสดงให้เห็นถึงศักยภาพของระบบ deep learning ที่สามารถทำโชว์เพื่อความบันเทิงระหว่างเกมได้ โดยสามารถสังเคราะห์วีดีโอให้นักกีฬาบาสเกตบอลคนหนึ่งของทีมแสดงท่าเต้นบนหน้าจอขนาดยักษ์ได้แล้ว
โดยสตาร์ทอัพจากรัฐเท็กซัส Xpire AI ที่ก่อตั้งขึ้นมาร่วมกับเจ้าของทีมบาสเกตบอลคุณ Mark Cuban นี้เอง ซึ่งได้นำเอาเทคโนโลยีใหม่จากนักวิจัย NVIDIA ที่มีชื่อว่า pix2pixHD โดยจะเป็นเฟรมเวิร์กในการทำ Conditional GAN ตัวหนึ่งสำหรับการแปลงจากภาพหนึ่งไปเป็นอีกภาพได้ (image-to-image translation)
เพื่อที่จะสร้างข้อมูลสำหรับเทรนโครงข่าย Deep Convolutional Generative Adversarial Network (DCGAN) นั้น ทางวิศวกรใช้วิธีบันทึกภาพวีดีโอการเคลื่อนไหวของร่างกายของนักกีฬาคุณ Jalen Brunson ขึ้นมา ซึ่งวีดีโอสั้นๆ สามารถนำไปใช้เทรนได้โดยการคัดแยกท่าทางตำแหน่งการวางตัวในแต่ละเฟรมออกมา เพื่อสร้างเป็นภาพ skeleton ของแต่ละท่าโพสออกมาได้
“และตอนนี้พวกเราก็สามารถจับคู่ภาพระหว่างภาพ skeleton กับภาพจริงๆ ได้ โดยพวกเราสามารถเทรนโครงข่ายเพื่อจับคู่ระหว่างภาพข้อมูลเข้ากับภาพที่จะออกมาได้” สตาร์ทอัพอธิบายไว้ในบล็อคเทคโนโลยีเกี่ยวกับกระบวนการดังกล่าว “หลังจากเทรนไปหลายชั่วโมงแล้ว พวกเราก็ได้โมเดลที่สามารถจับคู่ข้อมูลภาพท่าโพสต่างๆ แล้วทำให้ออกมาเป็ภาพ output ที่เสมือนจริงได้” ซึ่งโมเดลที่เทรนได้มานี้ทำให้ทางทีมสามารถสร้างวีดีโอการเต้นของคุณ Jalen ที่ดูสมจริงและไม่เคยเห็นที่ไหนมาก่อน
