มหาวิทยาลัยเบอร์มิงแฮมเปิดตัวแพลตฟอร์ม JAMS ซึ่งช่วยให้นักดนตรีสามารถทำงานร่วมกันแบบเรียลไทม์โดยใช้อวาตาร์ที่ตอบสนองได้ นวัตกรรมนี้สัญญาว่าจะนำความมหัศจรรย์ของประสบการณ์ดนตรีแบบเจอหน้ากันมาสู่โลกเสมือนจริง ช่วยยกระดับการฝึกฝน การสอน และการแสดง
มหาวิทยาลัยเบอร์มิงแฮมเปิดตัวนวัตกรรมล้ำสมัยที่คาดว่าจะปฏิวัติวงการดนตรีเสมือนจริง แพลตฟอร์ม Joint Active Music Sessions (JAMS) ซึ่งพัฒนาจากการวิจัยสหวิทยาการ ช่วยให้นักดนตรีสามารถฝึกซ้อม แสดง และสอนดนตรีได้เหมือนจริงโดยใช้เทคโนโลยีอวตาร
“นักดนตรีจะบันทึกตัวเองและส่งวิดีโอไปยังนักดนตรีคนอื่น ซอฟต์แวร์จะสร้างอวาตาร์ที่ตอบสนองและเล่นเพลงได้อย่างสอดประสานกับคู่หูทางดนตรีอย่างสมบูรณ์แบบ สิ่งที่คุณต้องมีคือ iPhone และชุดหูฟัง VR เพื่อนำนักดนตรีมารวมกันเพื่อการแสดง การฝึกซ้อม หรือการสอน” Massimiliano (Max) Di Luca รองศาสตราจารย์แห่งมหาวิทยาลัยเบอร์มิงแฮม ซึ่งเป็นผู้นำทีมพัฒนากล่าวใน ข่าวประชาสัมพันธ์.
แพลตฟอร์ม JAMS ก้าวข้ามสภาพแวดล้อมดนตรีเสมือนจริงแบบเดิมด้วยการใช้อวาตาร์ที่จับภาพความละเอียดอ่อนและความแตกต่างของการแสดงดนตรี อวาตาร์เหล่านี้สามารถจำลองการเคลื่อนไหวของคันชักของนักไวโอลินได้อย่างสมจริงหรือช่วยให้สมาชิกวงเสมือนจริงสบตากันได้อย่างมีความหมาย จึงช่วยยกระดับปฏิสัมพันธ์ทางดนตรีโดยรวม
ต่างจากการทำงานร่วมกันทางดนตรีเสมือนจริงอื่น ๆ JAMS ช่วยขจัดปัญหาความล่าช้า
“ความล่าช้าคือความล่าช้าระหว่างการผลิตเสียงและเวลาที่เสียงนั้นไปถึงผู้ฟัง และผู้แสดงอาจเริ่มรู้สึกถึงผลกระทบของความล่าช้าที่ต่ำถึง 10 มิลลิวินาที ส่งผลให้เสียงผิดจังหวะ เสียสมาธิ หรือเสียสมาธิจากด้านเทคนิคของการเล่น” Di Luca กล่าวเสริม
JAMS ได้รับการพัฒนาขึ้นระหว่างโครงการ Augmented Reality Music Ensemble (ARME) โดยได้รับการสนับสนุนจากอัลกอริทึมแบบไดนามิกที่บันทึกการปรับเปลี่ยนตามช่วงเวลาของนักแสดง โครงการที่สร้างสรรค์นี้รวบรวมผู้เชี่ยวชาญจากสาขาจิตวิทยา วิทยาการคอมพิวเตอร์ วิศวกรรมศาสตร์ ดนตรี วิทยาศาสตร์การกีฬา และคณิตศาสตร์
“เรามุ่งมั่นที่จะนำความมหัศจรรย์ของการเล่นดนตรีแบบตัวต่อตัวมาสู่โลกเสมือนจริง คุณสามารถปรับเปลี่ยนอวตารที่คนอื่นเล่นด้วยหรือเรียนรู้ที่จะเล่นได้ดีขึ้นผ่านการฝึกฝนกับปรมาจารย์” ดร. ดิ ลูคา กล่าวเสริม
JAMS ช่วยเพิ่มความรู้สึกถึงความเชื่อมโยงระหว่างนักดนตรีด้วยการสร้างฉากหลังที่สมจริงและเต็มอิ่ม และให้ใบหน้าของอวาตาร์อยู่ระดับสายตา แพลตฟอร์มนี้เปิดโอกาสใหม่ๆ ให้กับนักดนตรีที่มีประสบการณ์และมือใหม่ในการแสดงเป็นกลุ่มเสมือนจริงแบบโต้ตอบ นำไปสู่ความเป็นไปได้สำหรับคอนเสิร์ตเสมือนจริงขนาดใหญ่และวิธีการสอนดนตรีที่สร้างสรรค์
นอกจากนี้ JAMS ยังมีศักยภาพเชิงพาณิชย์ รวมถึงคุณสมบัติสำหรับการลิปซิงค์ การพากย์เสียงในสื่อ และการสร้างฝาแฝดทางดิจิทัลของนักดนตรี อวาตาร์เหล่านี้สามารถได้รับอนุญาตให้ใช้ในแอปพลิเคชันต่างๆ ได้ เพื่อส่งเสริมวิธีการใหม่ๆ ในการใช้ประโยชน์จากแคตตาล็อกและสิทธิ์ในการเผยแพร่