أطلقت جوجل نموذج الموسيقى Magenta RealTime 2، وتأخير التشغيل المحلي على جهاز Mac أقل من 200 مللي ثانية

وفقًا لمراقبة Beating، أصدرت شركة جوجل DeepMind نموذج توليد الموسيقى في الوقت الحقيقي مفتوح المصدر Magenta RealTime 2 (المختصر MRT2). تم تحسين النموذج الجديد خصيصًا لأجهزة MacBook المزودة بشريحة أبل (سلسلة M)، ويدعم التشغيل المحلي منخفض التأخير للغاية. يمكن للمستخدمين تشغيل النموذج كآلة موسيقية والتحكم فيها في الوقت الحقيقي عبر إشارات MIDI، أو أوامر نصية، أو مقاطع صوتية، مع تأخير أقل من 200 مللي ثانية.

يمكن للموسيقيين توجيه توليد الموسيقى بطرق تفاعلية متعددة. في وضع التوجيه عبر MIDI، يقوم نظام المصاحبة تلقائيًا بإنشاء مصاحبة أوركسترالية أو غيرها استنادًا إلى الأوتار التي يعزفها العازف. في وضع تحويل النص إلى موسيقى، يمكن للمستخدم إدخال أوصاف أسلوب مثل «disco funk» لإنشاء موسيقى MIDI قابلة للعزف. في وضع استنساخ الصوت، يكفي أن يسحب المستخدم مقطع صوتي قصير، ليتمكن النظام من محاكاة الصوت المقابل. كما يدعم عملية توليد الصوت التعديل الديناميكي عبر مذبذب منخفض التردد، أو وحدة تحكم MIDI، أو مدخلات الكاميرا، مما يوفر أبعاد تفاعلية غنية لتصميم الأصوات في الوقت الحقيقي.

لتلبية احتياجات الأجهزة المختلفة، أطلق فريق التطوير نسختين بمواصفات مختلفة من حيث المعلمات. نسخة mrt2_small التي تحتوي على 230 مليون معلمة يمكنها أداء الاستنتاج في الوقت الحقيقي بسلاسة على جميع أجهزة أبل المزودة بشريحة من نوع MacBook Air وغيرها. أما نسخة mrt2_base التي تحتوي على 2.4 مليار معلمة، فهي ذات جودة صوت أعلى، وتتطلب شرائح من نوع M Pro أو Max من الجيل الأعلى لضمان توليد الصوت في الوقت الحقيقي.

حاليًا، تم فتح مصدر مكتبة الاستنتاج magenta-rt ومحرك الاستنتاج المبني على C++ magentart::core على GitHub، كما توفر الشركة تطبيقات مستقلة تعمل مباشرة على macOS بالإضافة إلى ملحقات لبرامج استوديو الصوت الرقمي (DAW).
شاهد النسخة الأصلية
قد تحتوي هذه الصفحة على محتوى من جهات خارجية، يتم تقديمه لأغراض إعلامية فقط (وليس كإقرارات/ضمانات)، ولا ينبغي اعتباره موافقة على آرائه من قبل Gate، ولا بمثابة نصيحة مالية أو مهنية. انظر إلى إخلاء المسؤولية للحصول على التفاصيل.
  • أعجبني
  • تعليق
  • إعادة النشر
  • مشاركة
تعليق
إضافة تعليق
إضافة تعليق
لا توجد تعليقات
  • مُثبت