นักวิจัยที่ Deezer ได้พัฒนาระบบ AI ที่มีความสามารถในการเชื่อมโยงเพลงบางเพลงกับอารมณ์เพลงและความรุนแรงในเพลงได้ โดยงานนี้เพิ่งได้อธิบายในงานตีพิมพ์ที่ Arxiv.org ที่มีชื่อว่า “Music Mood Detection Based on Audio Lyrics With Deep Neural Nets”
ในการตัดสินว่าเพลงนี้มีอารมณ์อย่างไรนั้น ทีมงานได้คำนึงถึงทั้งสัญญาณเสียงเพลงและเนื้อเพลง โดยเริ่มต้นที่พวกเขานำสัญญาณเสียงเพลงนั้นๆ เข้าไปในโครงข่ายประสาทเทียม (Neural Network) พร้อมกับโมเดลที่จะสร้างบริบทของคำต่างๆ ขึ้นมาใหม่ จากนั้นจึงสอนมันว่าจะต้องตัดสินว่าเพลงนั้นมีอารมณ์อย่างไรได้ โดยใช้ฐานข้อมูล Million Song Dataset (MSD) ซึ่งมีการเก็บข้อมูล metadata มากกว่า 1 ล้านเพลงร่วมสมัย โดยเฉพาะอย่างยิ่ง พวกเขาได้ใช้ข้อมูล dataset ของ Last.fm ซึ่งจะมีกำหนด tag ที่แตกต่างกันที่ระบุไว้ในเพลงมากกว่า 500,000 เพลงแล้ว ซึ่ง tag เหล่านั้นจะเกี่ยวข้องกับอารมณ์ อีกทั้ง คำศัพท์ภาษาอังกฤษมากกว่า 14,000 คำจาก tag เหล่านี้จะถูกนำไปใช้ในการให้คะแนน 2 ระดับว่าเป็นคำที่เกี่ยวข้องกับเชิง negative หรือ positive อีกทั้งยังเอาไปใช้ตัดสินว่าเป็นคำที่ทำให้สงบหรือว่ากระตุ้นหรือไม่ในการนำไปเทรนระบบ
โดยฐานข้อมูล Million Song นั้นจะมีเพียงแค่ metadata ของเพลงนั้นๆ จะไม่ได้มีตัวเพลงมาด้วย ดังนั้นทีมงานจึงจะต้องจับคู่ข้อมูลต่างๆ เหล่านั้นในแคตตาล็อกของ Deezer เองโดยใช้ตัวคัดแยกต่างๆ อย่างเช่นชื่อเพลง ชื่อนักร้อง หรือชื่ออัลบัม ซึ่งข้อมูลประมาณ 60% ของข้อมูล dataset (18,644 แทร็ค) ได้ถูกนำมาเทรนระบบ AI และส่วนที่เหลือได้นำไปใช้สำหรับ validate และ test ระบบต่อไป
ในท้ายที่สุด นักวิจัยสรุปการทดลองได้ว่าระบบ AI นั้นสามารถที่จะตรวจจับอารมณ์หรือพลังงานในเพลงได้ดีกว่า และดีกว่าวิธีการดั้งเดิมโดยส่วนมากที่ไม่ได้ใช้ระบบ AI ในการตรวจจับว่าเพลงนั้นมีความรู้สึกเป็น positive หรือ negative “มันดูเหมือนว่าประสิทธิภาพที่ได้รับนี้จะเป็นผลลัพธ์ความสามารถของโมเดลของพวกเราที่สามารถนำเอาความสัมพันธ์ระหว่างเสียงเพลงและเนื้อเพลงมาใช้ได้” นักวิจัยเขียนในงานตีพิมพ์
นอกจากนี้ ในงานตีพิมพ์ยังได้มีโน้ตเพิ่มเติมในการที่จะใช้ประโยชน์จากงานนี้ได้จริงคือ “ฐานข้อมูลที่มีเนื้อเพลง synchronize กับเสียงเพลง จะสามารถช่วยให้งานนี้ไปข้างหน้าได้อีกมาก” ถ้าหากว่ามีฐานข้อมูลลักษณะดังกล่าวอยู่ ทีมงานเชื่อว่าพวกเขาจะสามารถดำเนินการตัดสินอารมณ์ในเพลงได้ดีกว่านี้ “ในบางกรณ๊ มันอาจจะมีความหลากหลายระหว่างผู้ฟังอย่างมีนัยสำคัญเกิดขึ้น (เช่นคุนอาจจะไม่ได้เห็นด้วยกันทั้งหมดว่าเพลงนี้เป็น positive หรือ negative)” ยิ่งไปกว่านั้น ทีมนักวิจัยยังเชื่อว่างานในลักษณะนี้จะเป็นอีกทางหนึ่งที่จะสามารถดูรายละเอียดเพิ่มเติมว่าเพลง เนื้อเพลง และอารมณ์มีความเกี่ยวข้องกันอย่างไร เช่นเดียวกับความเป็นไปได้ที่จะมีโมเดล deep learning ที่สามารถที่จะจัดเรียงและค้นหาข้อมูล unlabelled data ในฐานข้อมูลขนาดใหญ่ได้
Source : https://www.theverge.com/2018/9/23/17888240/deezer-researchers-ai-system-detect-song-musical-mood
