AI แปลงเสียงร้องเป็นเครื่องดนตรี เทคโนโลยีถ่ายโอนโทนเสียง
AI ถ่ายโอนโทนเสียง หรือที่เรียกกันว่า timbre transfer คือเทคโนโลยีที่วิเคราะห์ทำนอง จังหวะ และการเปลี่ยนแปลงความดังจากเสียงต้นทาง เช่น เสียงฮัมหรือเสียงร้อง แล้วสร้างเสียงใหม่ที่มีโทนเหมือนเครื่องดนตรีอื่น เช่น ไวโอลิน ฟลุต หรือทรัมเป็ต โดยยังคงทำนองและอารมณ์เดิมไว้ ผู้ที่มีไอเดียทำนองแต่เล่นเครื่องดนตรีไม่เป็น จึงทดลองฟังได้ว่าทำนองนั้นจะเป็นอย่างไรเมื่ออยู่ในเสียงเครื่องดนตรีจริง อย่างไรก็ตาม ผลลัพธ์ยังมีข้อจำกัด และไม่สามารถแทนนักดนตรีที่เข้าใจเทคนิคเฉพาะของเครื่องดนตรีแต่ละชนิดได้
หลักการทำงานแบบเข้าใจง่าย
- แยกระดับเสียงหรือพิตช์จากเสียงต้นทาง
- วัดความดังที่เปลี่ยนไปในแต่ละช่วง
- ตัดโทนเสียงเดิมของคนร้องออก
- ใช้โมเดลที่เรียนรู้เสียงเครื่องดนตรีปลายทาง
- สร้างเสียงใหม่ตามพิตช์และความดังเดิม
ผลที่ได้จึงเหมือนเครื่องดนตรีกำลังเล่นตามการร้องของเรา
ต่างจากการแปลงเป็นโน้ตอย่างไร
แปลงเป็นโน้ตแล้วเล่นใหม่
วิธีเดิมคือแปลงเสียงร้องเป็นข้อมูลโน้ต แล้วให้เครื่องสังเคราะห์เล่น ผลมักแข็ง เพราะรายละเอียดอย่างการเอื้อนหายไป
ถ่ายโอนโทนเสียงโดยตรง
วิธีใหม่รักษาการเลื่อนเสียง การสั่นเสียง และความดังที่เปลี่ยนต่อเนื่องไว้ เสียงจึงมีชีวิตกว่า
ใช้งานได้ในสถานการณ์ใด
จดไอเดียทำนอง
นักแต่งเพลงฮัมทำนองลงโทรศัพท์ แล้วฟังเป็นเสียงเครื่องดนตรีเพื่อตัดสินใจเรียบเรียง
ทดลองเสียงในงานสร้างสรรค์
ผู้ผลิตเพลงอาจสร้างเสียงแปลกใหม่ เช่น เสียงร้องที่กลายเป็นเครื่องเป่า
การเรียนรู้
ผู้เรียนดนตรีได้ยินว่าประโยคเพลงที่ร้องได้ จะฟังอย่างไรบนเครื่องดนตรีต่าง ๆ
จุดที่ระบบยังทำได้ไม่ดี
เสียงต้นทางต้องชัด
ถ้ามีเสียงรบกวนหรือเสียงหลายคนพร้อมกัน ผลจะเพี้ยน
ทำได้ดีกับทำนองเดี่ยว
การเล่นหลายเสียงพร้อมกันอย่างคอร์ดเปียโนยังเป็นเรื่องยากสำหรับระบบส่วนใหญ่
ช่วงเสียงจำกัด
ถ้าร้องต่ำกว่าช่วงเสียงจริงของฟลุต ผลที่ได้อาจฟังไม่เป็นธรรมชาติ
เทคนิคเฉพาะเครื่อง
การดีดสาย การตัดลิ้น หรือการเปลี่ยนคันชักยังเลียนแบบได้ไม่ครบ
เรื่องสิทธิ์และจริยธรรม
ถ้าใช้เสียงร้องของคนอื่นเป็นต้นทาง ควรได้รับอนุญาตจากเจ้าของเสียง และควรตรวจสอบเงื่อนไขของเครื่องมือว่าผลงานที่ได้ใช้เชิงพาณิชย์ได้หรือไม่ หากเผยแพร่ผลงาน การบอกผู้ฟังว่ามีการใช้ AI ช่วยสร้างเสียง เป็นการสื่อสารอย่างตรงไปตรงมา
ประโยชน์สำหรับนักเรียนเปียโน
นักเรียนเปียโนอาจใช้เทคโนโลยีนี้ฝึกการร้องประโยคเพลงก่อนเล่น โดยฮัมทำนองแล้วฟังเป็นเสียงเครื่องสาย เพื่อสังเกตว่าประโยคมีการขึ้นลงและหายใจอย่างไร จากนั้นนำความรู้สึกนั้นกลับมาเล่นบนเปียโน ทำให้ทำนองร้องเพลงได้มากขึ้น ไม่ใช่แค่กดโน้ตต่อกัน
ลองใช้อย่างไรให้ได้ผล
อัดในห้องเงียบ
ใช้ไมโครโฟนโทรศัพท์ก็ได้ แต่ควรห่างจากพัดลมและเครื่องปรับอากาศ
ร้องให้ชัดและไม่สั่นมาก
ทำนองที่ชัดเจนช่วยให้ระบบจับพิตช์ได้แม่น
เลือกเครื่องดนตรีที่ช่วงเสียงใกล้กัน
ผู้ชายเสียงต่ำอาจได้ผลดีกับเชลโล ส่วนเสียงสูงเหมาะกับฟลุตหรือไวโอลิน
กิจกรรมในห้องเรียนดนตรี
ครูอาจให้นักเรียนแต่ละคนฮัมทำนองสั้น ๆ ที่แต่งเอง แล้วแปลงเป็นเสียงเครื่องดนตรีต่างชนิด จากนั้นเปิดให้เพื่อนในห้องฟังและทายว่าเป็นเครื่องดนตรีอะไร กิจกรรมนี้ช่วยให้นักเรียนรู้จักโทนเสียงของเครื่องดนตรีหลายแบบ และรู้สึกว่าทำนองของตัวเองมีคุณค่า เมื่อฟังจบ ครูชวนคุยว่าเครื่องดนตรีไหนเข้ากับอารมณ์ของทำนองมากกว่า และเพราะอะไร การคุยแบบนี้ฝึกให้นักเรียนอธิบายสิ่งที่ได้ยินเป็นคำพูด ซึ่งเป็นทักษะสำคัญของนักดนตรี
แนวโน้มในอนาคต
นักวิจัยกำลังพัฒนาให้ระบบรองรับหลายเสียงพร้อมกัน และทำงานแบบเรียลไทม์ได้ลื่นขึ้น ในอนาคตนักดนตรีอาจร้องบนเวทีแล้วได้ยินเสียงเครื่องดนตรีตามทันที แต่ทักษะการฟังและการเข้าใจดนตรียังเป็นสิ่งที่มนุษย์ต้องฝึกเอง
คำถามที่พบบ่อย
ถาม: ต้องร้องเพลงเก่งไหมถึงใช้ได้
ตอบ: ไม่จำเป็น ขอให้ร้องหรือฮัมทำนองได้ชัดพอ
ถาม: แปลงเป็นเสียงเปียโนได้ไหม
ตอบ: บางเครื่องมือทำได้ แต่เสียงเปียโนมีลักษณะเฉพาะเรื่องการกดและการค้างเสียง ผลอาจไม่เหมือนจริงนัก
ถาม: ใช้แทนนักดนตรีจริงได้ไหม
ตอบ: เหมาะสำหรับร่างไอเดียและทดลองเสียง แต่การบันทึกงานจริงยังต้องอาศัยความเข้าใจของนักดนตรี
ถาม: ทำงานบนโทรศัพท์ได้ไหม
ตอบ: มีบางแอปที่ทำได้ ส่วนงานคุณภาพสูงมักใช้คอมพิวเตอร์
ถาม: ผลงานที่ได้เป็นลิขสิทธิ์ของใคร
ตอบ: ขึ้นกับเงื่อนไขของเครื่องมือและกฎหมาย ควรอ่านข้อตกลงก่อนใช้งานเชิงพาณิชย์
เริ่มต้นกับ TIGA ALPHA
ถ้าอยากเรียนเปียโนออนไลน์โดยมีผู้ช่วยฟังทุกครั้งที่ซ้อม TIGA ALPHA เป็นแอปพลิเคชันสอนเปียโนออนไลน์ฝีมือทีมคนไทย ใช้การสอนเปียโนด้วย AI จับโน้ตและจังหวะขณะเล่นเปียโน แล้วชี้จุดที่ควรแก้ทันที เลือกเรียนได้ทั้งภาษาไทย อังกฤษ และจีนกลาง แนวทางบทเรียนดูแลโดยครูอั้ม CEO ผู้สอนเปียโนมา 20 ปี จะใช้เป็นแอปสอนเปียโนสำหรับมือใหม่ หรือแอปสอนเปียโนออนไลน์สำหรับคนที่เคยเรียนมาแล้วก็ได้ ทดลองแอปสอนเปียโน AI ได้ที่ TIGA ALPHA ทุกคนใช้แพ็กเกจพรีเมียมฟรี 7 วัน แล้วต่อเดือนละ 799 บาท
สำหรับคนที่อยากได้คอร์สเรียนเปียโนออนไลน์ AI คู่กับการเรียนเปียโนแบบมีครูดูแล ดูคอร์สเปียโนและคอร์สเรียนเปียโนของ TIGA Studio ที่สอนดนตรีทั้งเด็กและผู้ใหญ่ ให้เรียนดนตรีและเล่นดนตรีได้อย่างสนุก และติดตามแนวคิดของบริษัทนวัตกรรมการศึกษาด้วย AI ที่ www.tigaalpha.com
เมื่อเสียงฮัมธรรมดากลายเป็นเสียงเครื่องดนตรีได้ ไอเดียดนตรีก็ไม่ต้องรอให้เล่นเครื่องเป็นก่อน