เรื่องราวเกิดขึ้นเมื่อ Jesse Engel นักวิจัยจาก Google Brain ลองปรับการตั้งค่าเสียงของระบบปัญญาประดิษฐ์ทางดนตรีที่กำลังทำการพัฒนาอยู่เล่นๆ และโดยบังเอิญ การทดลองเล่นๆนี้เองที่ก่อให้เกิดเสียงผสมระหว่างคลาวิคอร์ดและออร์แกนแฮมมอคในอัตราส่วนที่ไม่เคยมีมนุษย์คนใดได้ยินมาก่อน
เสียงที่เกิดขึ้นนั้นไม่เหมือนกับการเล่นเครื่องดนตรี 2 ชนิดพร้อมๆกันแต่อย่างใด แต่เป็นส่วนผสมระหว่างสูตรคณิตศาสตร์ของโน้ตในแต่ละเครื่องดนตรีที่ถูกประมวลผลโดยระบบ AI ในทำนองเดียวกันกับกรณีความบังเอิญในครั้งแรก นักวิจัยจะสามารถสร้างเสียงที่ไม่มีใครเคยได้ยินมาก่อนด้วยการผสมเสียงจากเครื่องดนตรีต่างๆที่มีอยู่ในระบบมากกว่า 1000 ชนิด เข้าด้วยกัน
Jesse Engel เป็นหนึ่งในสมาชิกของทีม Magenta ภายใต้สังกัด Google Brain ทีมเล็กๆทีมนี้มีเป้าหมายในการพัฒนาระบบคอมพิวเตอร์ที่สร้างสรรค์ผลงานศิลปะได้ และการผสมเสียงดังกล่าวก็เป็นโปรเจคล่าสุดของพวกเขาที่ได้รับชื่อ NSynth ที่จะถูกนำเสนอแบบเต็มรูปแบบในงานเทศกาลศิลปะ ดนตรี และเทคโนโลยี Moogfest
โดยจุดมุ่งหมายหลักของ NSynth นั้นคือการนำเสนอเครื่องมือแบบใหม่ซึ่งนักดนตรีสามารถนำไปแต่งเพลงได้ เบื้องหลังการทำงานของระบบนี้คือฐานข้อมูลเสียงขนาดใหญ่ที่ถูกป้อนลงไปใน Neural Network เพื่อทำการวิเคราะห์โน้ตและสูตรทางคณิตศาสตร์ที่อธิบายลักษณะของเสียงจากเครื่องดนตรีแต่ละชนิด และนำไปประกอบเป็นเสียงดนตรีต่อไป
นอกจากการปรับค่าของ NSynth ผ่าน slider ตั้งค่าดังที่ Engel ได้ทำแล้ว ทางทีมยังได้พัฒนาหน้า user interface สำหรับการทดลองผสมเสียงระหว่างเครื่องดนตรี 4 ชนิดเข้าด้วยกัน และในอนาคต ทางทีมอาจมีการพัฒนาระบบ AI แยกออกมาอีกระบบเพื่อประมวลผลเสียงที่เกิดจากการผสมเหล่านี้
อัลกอริทึมและระบบทั้งหมดของ NSynth ได้ถูกตีพิมพ์เป็นเปเปอร์ไว้ที่นี่ และยังได้เปิดให้ผู้ที่สนใจสามารถดาวน์โหลดชุดข้อมูลเสียงไปใช้ในงานอื่นๆอีกด้วย
อ้างอิง: https://www.wired.com/2017/05/google-uses-ai-create-1000s-new-musical-instruments/