Alibaba Cloud เปิดตัว Xiaomo ล่ามภาษามือรูปแบบ Digital Avatar เพื่อให้ผู้บกพร่องทางการได้ยินมีส่วนร่วมการแข่งขันได้ดีมากขึ้นในการแข่งขัน Hangzhou Asian Games
ข้อมูลจากองค์การอนามัยโลก (WHO) ระบุว่าปัจจุบันผู้คนมากกว่า 1.5 พันล้านคน (เกือบ 20% ของจำนวนประชากรโลก) มีภาวะสูญเสียการได้ยิน
ดังนั้น เพื่อส่งเสริมความเท่าเทียมกันในการแข่งขัน Asian Para Games ซึ่งจะจัดขึ้นระหว่างวันที่ 22 ถึง 28 ตุลาคมนี้ Alibaba Cloud ได้เปิดตัวอวาตาร์ดิจิทัลชื่อ Xiaomo (เสี่ยวโม่) ซึ่งให้บริการเป็นล่ามภาษามือให้กับผู้บกพร่องทางการได้ยิน
Alibaba Cloud ผสานรวมดิจิทัลอวาตาร์ Xiaomo ไว้ใน mini-app บนแพลตฟอร์มการชำระเงิน Alipay ซึ่ง mini-app นี้รองรับการแปลสองทาง ระหว่างภาษามือและภาษาพูดที่เป็นภาษาจีน ผู้ใช้สามารถป้อนเสียงพูด จากนั้นผู้สวมบทบาทเวอร์ชวลจะแปลงเป็นภาษามือให้กับผู้บกพร่องทางการได้ยิน
ในทางกลับกัน mini-app สามารถแปลงภาษามือเป็นภาษาพูดได้ เพื่ออำนวยความสะดวกให้ผู้บกพร่องทางการได้ยินและผู้ที่ไม่มีความบกพร่องด้านนี้สื่อสารกันได้อย่างราบรื่น
ภาษามือที่ผสานกับท่าทาง การแสดงออก และการเคลื่อนไหวร่างกายที่เป็นเอกลักษณ์นี้ มีหลักการออกเสียง คำศัพท์ และไวยากรณ์เป็นของตัวเอง ซึ่งแตกต่างจากภาษาพูด Alibaba Cloud จึงได้รวบรวมชุดข้อมูลการแปลภาษามือภาษาจีนที่ประกอบด้วยสัญลักษณ์ 25,000 รายการที่รวบรวมและใส่คำอธิบายประกอบ โดยผู้ทำงานด้านภาษามือ และผู้บกพร่องทางการได้ยินในมณฑลเจ้อเจียงของประเทศจีน
Alibaba Cloud ใช้ประโยชน์จากอัลกอริธึมการจดจำภาพขั้นสูง และความสามารถในการติดตามกิริยาท่าทาง เพื่อบันทึกความเคลื่อนไหวของผู้บกพร่องทางการได้ยิน และแปลงภาษามือเป็นภาษาธรรมชาติ ด้วยโมเดลการแปลภาษาที่ล้ำสมัย
สำหรับการแปลงภาษาธรรมชาติเป็นภาษามือ Alibaba Cloud ได้พัฒนาโครงข่ายประสาทเทียม และโมดูลสร้างการเคลื่อนไหวของริมฝีปาก ซึ่งช่วยให้ virtual character แสดงท่าทางภาษามือได้แม่นยำ