M6: قواعد بيانات كشف الموسيقى المولدة آلياً متعددة المولدات، متعددة المجالات، متعددة اللغات والثقافات، متعددة الأنواع، متعددة الآلات M6: multi-generator, multi-domain, multi-lingual and cultural, multi-genres, multi-instrument machine-generated music detection databases

شارك:
المجلة: Scientific Reports، المجلد: 16، العدد: 1
DOI: https://doi.org/10.1038/s41598-026-36044-w
PMID: https://pubmed.ncbi.nlm.nih.gov/41688531
تاريخ النشر: 2026-02-13
المؤلف: Yupei Li وآخرون
الموضوع الرئيسي: الموسيقى ومعالجة الصوت

نظرة عامة

يقدم هذا القسم نظرة عامة على التحديات والتقدم في اكتشاف الموسيقى التي تم إنشاؤها بواسطة الآلات (MGMD)، مع التركيز على تقديم مجموعة بيانات M6. تم تصميم هذه المجموعة الشاملة كمعيار لتسهيل أبحاث MGMD من خلال تضمين مجموعة متنوعة من المولدات والأنماط واللغات والسياقات الثقافية، جميعها بتنسيق WAV. يوضح المؤلفون منهجية جمع البيانات الخاصة بهم ويقدمون درجات الأداء الأساسية من نماذج التصنيف الثنائي الأساسية، مما يبرز تعقيد MGMD وضرورة المزيد من البحث في طرق الكشف.

في الختام، يبرز المؤلفون أهمية قاعدة بيانات M6 مقارنة بالمجموعات الحالية، مشيرين إلى مصادرها الشاملة وتغطيتها. يثيرون مخاوف بشأن ملاءمة النماذج المعتمدة على المحولات لمهام MGMD، مقترحين أن تعقيدها قد يكون غير مبرر. يدعو المؤلفون إلى أن تركز الأبحاث المستقبلية على تطوير نماذج أكثر قوة مع تحسين الأداء خارج النطاق وزيادة قابلية تفسير النماذج. كما يؤكدون على الحاجة إلى نهج متعددة الوسائط التي تدمج الكلمات والنماذج الهرمية لمعالجة الهيكل الطويل الأمد للموسيقى بشكل أفضل.

مقدمة

تناقش مقدمة ورقة البحث الارتفاع السريع للموسيقى التي تم إنشاؤها بواسطة الآلات (MGM) التي يسهلها التقدم في نماذج اللغة الكبيرة (LLMs)، وخاصة نماذج LLMs الصوتية. تمثل منصات مثل MuseNet وJukedeck من OpenAI هذا الاتجاه، الذي يقدم فرصًا وتحديات لصناعة الموسيقى. بينما يمكن أن تعزز MGM الإبداع وتوفر أطرًا هيكلية لإنتاج الموسيقى، تثار مخاوف بشأن الأصالة وحقوق الطبع والنشر والاحتمال المحتمل لتخفيف القيمة الفنية. يؤكد المؤلفون على الحاجة إلى كشف فعال عن الموسيقى التي تم إنشاؤها بواسطة الآلات (MGMD) للحفاظ على نزاهة الموسيقى التي أنشأها البشر في ظل الزيادة المتزايدة للأعمال التي تم إنشاؤها بواسطة الذكاء الاصطناعي.

تحدد الورقة فجوات كبيرة في أبحاث MGMD الحالية، وخاصة عدم كفاية المجموعات الحالية مثل FakeMusicCaps وSONICS، التي لا تلبي بشكل كافٍ تعقيدات مهام MGMD. يجادل المؤلفون بأن مجموعة بيانات متنوعة ضرورية لتدريب نماذج MGMD فعالة، حيث أن الموسيقى بطبيعتها ذات طابع شخصي وتختلف بشكل كبير في التنسيق. كما يشيرون إلى أن MGMD أكثر تعقيدًا من التصنيف الثنائي البسيط، مما يبرز دمج التكنولوجيا في إنتاج الموسيقى المعاصرة. يسمح هذا الدمج بالتكيف السريع وتحويل الأفكار الموسيقية، مما يثير تحديات في التأليف وظهور الأعمال “نصف الذكاء الاصطناعي”. تركز الأبحاث بشكل خاص على الألحان والكلمات التي تم إنشاؤها بالكامل بواسطة الذكاء الاصطناعي، مع الاعتراف بالتداعيات الدقيقة لدور الذكاء الاصطناعي في الإبداع الفني.

النتائج

في تقييم النماذج، أظهر ResNet-18 أداءً متفوقًا من حيث الدقة ودرجة F1 لمهمة الكشف، كما هو موضح في الجداول 9 و10. على الرغم من أن Q-SVM وViT حققا نتائج أقل قليلاً، إلا أنهما ظلا تنافسيين. تشير التحليلات إلى أن مجموعة البيانات متوازنة نسبيًا، مدعومة بالتشابه بين درجات الدقة وF1 ورؤى من منحنيات AUC-ROC. من الجدير بالذكر أن الموسيقى طويلة الأمد (e) شكلت أكبر تحدٍ، مما يشير إلى الحاجة إلى نماذج أكثر قوة لمعالجة الاعتماد في البيانات.

كشفت التحليلات الإضافية للحالات المصنفة بشكل خاطئ أن ResNet-18 يواجه صعوبة مع العينات التي تظهر مكونات تردد عالية قوية، على الأرجح بسبب معالجته لمخطط ميل كصورة، مما قد يحجب العلاقات الموضعية. على العكس، يصنف ViT بشكل خاطئ الحالات التي تفتقر فيها التسلسل الزمني إلى ميزات مميزة، مما يبرز تركيزه على النمذجة السياقية. يدعو المؤلفون إلى استخدام طرق الذكاء الاصطناعي القابلة للتفسير المتقدمة للتحقق من هذه التفسيرات، مما يجعل هذا طريقًا واعدًا للبحث المستقبلي.

المناقشة

تؤكد قسم المناقشة في الورقة على التأثير السلبي المحتمل للموسيقى التي تم إنشاؤها بواسطة الذكاء الاصطناعي على مجتمع الموسيقى، خاصة فيما يتعلق بالاكتفاء السوقي. يدعو المؤلفون إلى مزيد من البحث في مستويات المشاركة المقبولة للذكاء الاصطناعي في إنتاج الموسيقى، مع التركيز على مرحلة التأليف كمنطقة حاسمة لإظهار الإبداع و”الموسيقية”. يبرزون النقاشات الفلسفية المحيطة بالطبيعة الذاتية للموسيقى والتحديات في تقييم الإبداع، مشيرين إلى أن الأطر الحالية لتقييم “الموسيقية” محدودة. يقترح المؤلفون إنشاء مجموعة بيانات شاملة، M6، لتسهيل البحث في هذا المجال، مشيرين إلى أوجه التشابه مع المجموعات الناجحة في كشف النصوص التي تم إنشاؤها بواسطة الآلات.

تم تصميم M6 لمعالجة الفجوات في المجموعات الحالية مثل FakeMusicCaps وSONICS من خلال توفير معيار متنوع ودقيق للكشف عن الموسيقى التي تم إنشاؤها بواسطة آلات متعددة، ومجالات متعددة، ولغات متعددة، وأنماط متعددة (MGMD). تشمل مجموعة البيانات أنواعًا وسيناريوهات موسيقية متنوعة، مما يضمن التمثيل عبر الأنماط والثقافات والآلات. يناقش المؤلفون أيضًا أهمية مراقبة الجودة في إنتاج الموسيقى، باستخدام مقاييس موضوعية لتقييم الخصائص الإيقاعية واللحنية. تكشف تحليلاتهم عن اختلافات منهجية بين الموسيقى التي تم إنشاؤها بواسطة الآلات والموسيقى التي ألفها البشر، مما يشير إلى أنه بينما تحافظ الموسيقى التي تم إنشاؤها بواسطة الآلات الحالية على جودة عالية، إلا أنها لا تزال تظهر خصائص طيفية مميزة. تؤكد النتائج على الحاجة إلى مواصلة استكشاف التفاعل بين الذكاء الاصطناعي وإبداع الموسيقى، فضلاً عن الآثار المترتبة على صناعة الموسيقى.

Journal: Scientific Reports, Volume: 16, Issue: 1
DOI: https://doi.org/10.1038/s41598-026-36044-w
PMID: https://pubmed.ncbi.nlm.nih.gov/41688531
Publication Date: 2026-02-13
Author(s): Yupei Li et al.
Primary Topic: Music and Audio Processing

Overview

The section presents an overview of the challenges and advancements in the detection of machine-generated music (MGMD), emphasizing the introduction of the M6 dataset. This comprehensive benchmark dataset is designed to facilitate MGMD research by encompassing a wide variety of generators, genres, languages, and cultural contexts, all in WAV format. The authors detail their data collection methodology and provide baseline performance scores from foundational binary classification models, underscoring the complexity of MGMD and the necessity for further research in detection methods.

In the conclusion, the authors highlight the significance of the M6 database in comparison to existing datasets, noting its extensive sources and coverage. They raise concerns about the appropriateness of transformer-based models for MGMD tasks, suggesting that their complexity may be unwarranted. The authors advocate for future research to focus on developing more robust models with improved out-of-domain performance and enhanced model explainability. They also emphasize the need for multimodal approaches that integrate lyrics and hierarchical models to better address the long-term structure of music.

Introduction

The introduction of the research paper discusses the rapid rise of machine-generated music (MGM) facilitated by advancements in large language models (LLMs), particularly acoustic LLMs. Platforms like OpenAI’s MuseNet and Jukedeck exemplify this trend, which presents both opportunities and challenges for the music industry. While MGM can enhance creativity and provide structural frameworks for music production, concerns arise regarding originality, copyright, and the potential dilution of artistic value. The authors emphasize the need for effective machine-generated music detection (MGMD) to maintain the integrity of human-created music amidst the increasing prevalence of AI-generated works.

The paper identifies significant gaps in current MGMD research, particularly the inadequacy of existing datasets like FakeMusicCaps and SONICS, which do not sufficiently cater to the complexities of MGMD tasks. The authors argue that a diverse dataset is crucial for training effective MGMD models, as music is inherently subjective and varies widely in format. They also note that MGMD is more complex than simple binary classification, highlighting the integration of technology in contemporary music production. This integration allows for rapid adaptation and transformation of musical ideas, raising challenges in authorship and the emergence of “semi-AI” generated works. The research focuses specifically on melodies and lyrics that are fully generated by AI, acknowledging the nuanced implications of AI’s role in artistic creation.

Results

In the evaluation of the models, ResNet-18 demonstrated superior performance in terms of accuracy and F1 score for the detection task, as detailed in Tables 9 and 10. Although Q-SVM and ViT yielded slightly lower results, they remained competitive. The analysis indicates that the dataset is relatively balanced, supported by the similarity between accuracy and F1 scores and insights from the AUC-ROC curves. Notably, long-term music (e) posed the greatest challenge, suggesting the need for more robust models to address dependencies in the data.

Further analysis of misclassified cases revealed that ResNet-18 struggles with samples exhibiting strong high-frequency components, likely due to its treatment of the Mel-spectrogram as an image, which can obscure positional relationships. Conversely, ViT misclassifies instances where the temporal sequence lacks distinct features, highlighting its focus on contextual modeling. The authors advocate for the use of advanced explainable AI methods to validate these interpretations, marking this as a promising avenue for future research.

Discussion

The discussion section of the paper emphasizes the potential negative impact of AI-generated music on the music community, particularly regarding market saturation. The authors advocate for further research into the acceptable levels of AI involvement in music production, focusing on the composition phase as a critical area for demonstrating creativity and “musicality.” They highlight the philosophical debates surrounding the subjective nature of music and the challenges in evaluating creativity, noting that current frameworks for assessing “musicality” are limited. The authors propose the creation of a comprehensive dataset, M6, to facilitate research in this domain, drawing parallels to successful datasets in machine-generated text detection.

M6 is designed to address gaps in existing datasets like FakeMusicCaps and SONICS by providing a diverse and fine-grained benchmark for Multi-Generator, Multi-Domain, Multi-Lingual, and Multi-Genre Machine-Generated Music Detection (MGMD). The dataset includes various music types and scenarios, ensuring representation across genres, cultures, and instruments. The authors also discuss the importance of quality control in music generation, employing objective metrics to assess rhythmic and melodic characteristics. Their analysis reveals systematic differences between machine-generated and human-composed music, suggesting that while current machine-generated music maintains a high quality, it still exhibits distinct spectral properties. The findings underscore the need for continued exploration of the interplay between AI and music creation, as well as the implications for the music industry.