देखें कि कैसे इस AI ने वास्तविक समय में एक संगीतमय संवाद बनाने के लिए एक संगीतकार के साथ सुधार किया

3 फरवरी, 2023 को संगीतकार-प्रोग्रामर द्वारा बनाए गए संगीतकार और आर्टिफिशियल इंटेलिजेंस (एआई) ने मंच संभाला गिल्डहॉल स्कूल ऑफ म्यूजिक एंड ड्रामा लंदन में एक संगीत संवाद बनाने के लिए।

प्रदर्शन द्वारा प्रायोजित किया गया था कला और मानविकी अनुसंधान परिषद (एएचआरसी) और के एआई शोध पर आधारित है डॉ ओदेड बेन-ताल किंग्स्टन विश्वविद्यालय से, जो AHRC द्वारा वित्तपोषित अनुसंधान परियोजना का नेतृत्व करते हैं जो संगीत और डेटा के बीच संबंधों को देखता है।

बेन-ताल मंच पर कलाकार-सुधारक द्वारा शामिल हुए थे प्रोफेसर डेविड डोलन गिल्डहॉल स्कूल से। लाइव 75 मिनट के प्रदर्शन में डोलन और एआई के बीच संगीत संबंधी सुधार दिखाई दिए। परिणाम उनके बीच एक संगीत संवाद था जहां कंप्यूटर ने डोलन के प्रदर्शन को सुना और फिर वास्तविक समय में संगीत सामग्री का योगदान दिया।

बेन-ताल का कहना है कि कंप्यूटर ने स्वचालित तरीके से संगीत की पल-पल पीढ़ी की, और एआई कम्प्यूटरीकृत प्रणाली टोनल और मोडल और विस्तारित टोनलिटी के संदर्भ में रीयल-टाइम में जोड़ी सुधार करती है।

“इसे निष्पादित करते समय, मैं सिस्टम की निगरानी करता हूं क्योंकि यह डेविड के साथ प्रदर्शन करता है और चीजों को समायोजित करता है, इस बारे में कार्यकारी प्रकार के निर्णय लेता है कि सिस्टम बड़े समय अवधि में कैसे काम करेगा, 30 सेकंड से ऊपर कहें, एक सुधार के बड़े पैमाने पर कथा,” बेन ने कहा- ताल। “आउटपुट पियानो पर डेविड के साथ एक जोड़ी कामचलाऊ व्यवस्था है, जो बिना पूर्व नियोजित तत्वों और एक अर्ध-स्वायत्त एआई संगीत कलाकार से जुड़े कामचलाऊ प्रदर्शन करता है जो सीधे वक्ताओं को ध्वनि उत्पन्न करता है।”

बेन-ताल का कहना है कि प्रणाली के दो मुख्य भाग हैं – एक जो सुनता है और दूसरा जो संगीत उत्पन्न करता है।

बेन-ताल ने कहा, “हमने डेविड को पियानो पर एकल सुधार करते हुए रिकॉर्ड किया और मैंने इन रिकॉर्डिंग का उपयोग सिस्टम के प्रारंभिक विकास के लिए किया, सिस्टम कैसे” सुनता है “और यह कैसे प्रतिक्रिया करता है, में सुधार करता है।” “सुनने और प्रतिक्रिया दोनों भाग एक संगीतकार के रूप में मेरी संगीत सोच के पहलुओं को कूटबद्ध करते हैं। जो चीजें मैं सुनना चाहता हूं क्योंकि मैं उन्हें सुंदर और अभिव्यंजक और कल्पनाशील मानता हूं।

“मैंने डोलन को एक अंतःविषय कार्यशाला में योगदान करने के लिए आमंत्रित किया जो विभिन्न क्षेत्रों – संगीत, कंप्यूटर विज्ञान, इंजीनियरिंग, तंत्रिका विज्ञान के शोधकर्ताओं को लाया। “डेविड ने मानव कलाकारों और कंप्यूटर सिस्टम के बीच रीयल-टाइम संगीत संवाद को सक्षम करने के लिए मशीन श्रवण का उपयोग करते हुए मेरे पिछले काम के बारे में सुना, और उन्होंने पूछा कि क्या हम एक साथ कुछ काम कर सकते हैं।”

लेकिन बेन-ताल ने कहा कि डेविड आश्वस्त था कि वह यह साबित कर देगा कि एक कंप्यूटर मानव संगीतकारों के साथ सुधार नहीं कर सकता।

बेन-ताल ने कहा, “मुझे लगता है कि जब हम स्टूडियो में मिले तो उन्हें सुखद आश्चर्य हुआ, कंप्यूटर से संगीतमय आउटपुट सुनकर जो संगीत की समझ में आया।” “तथ्य यह है कि ये ध्वनियाँ संगीत की दृष्टि से प्रासंगिक और सार्थक थीं, जिसका अर्थ था कि हम लगभग हर महीने एक साथ सुधार करने और इस सहयोग को विकसित करने में सक्षम थे।”

डोलन का कहना है कि उनके हिस्से के लिए, जिस कारण से उन्होंने भाग लिया था और अभी भी एक जिज्ञासा है।

डोलन ने कहा, “मैंने विश्व स्तरीय सहयोगियों के साथ शास्त्रीय सुधार किए हैं, लेकिन कभी भी गैर-मानवीय साथी के साथ नहीं।” “जैसा कि ओडेड कहते हैं, मुझे यह विचार मिला, शुरू करने से पहले, असंभव, और तथ्य यह है कि कंप्यूटर / एआई संगीत लाइनों का उत्पादन करने में सक्षम था जिसके परिणामस्वरूप संगीत अर्थ और जोड़ी के लिए पर्याप्त सामान्य तत्व समझ में आया, जैसे, था पेचीदा।

नई तकनीक, नए संगीत के अवसर

बेन-ताल का मानना ​​है कि नई तकनीक संगीत के नए अवसर, पियानो, टेप मशीन, विनाइल रिकॉर्ड आदि ला सकती है।

बेन-ताल ने कहा, “एआई को अतीत में संगीत पर लागू किया गया है, लेकिन कंप्यूटिंग शक्ति और कंप्यूटिंग तकनीकों में विकास अब एआई को और अधिक रोचक बना देता है।” “इस सहयोग के लिए विशेष महत्व संगीत सूचना विज्ञान में विकास है – ध्वनि से संगीत-प्रासंगिक डेटा निकालने की क्षमता।”

बेन-ताल कहते हैं, “हम इसे मशीन सुनने के रूप में संदर्भित करते हैं, लेकिन मशीन लर्निंग शब्द की तरह, मानव प्रकार से संबंध बहुत आंशिक है।” “मशीनें इंसानों की तरह नहीं सीखती हैं। मशीनें इंसानों की तरह नहीं सुनतीं।”

प्रदर्शन के लिए, उन्होंने कंप्यूटर में पियानो की ध्वनि प्राप्त करने के लिए साधारण माइक्रोफोन का इस्तेमाल किया। एआई ने उस संकेत का विश्लेषण किया और संगीत संबंधी अनुमान लगाने की कोशिश की और इनपुट की संगीतमय समझ बनाने की कोशिश की।

“यह डेटा रूपांतरण प्रक्रिया – ऑडियो सिग्नल से लेकर संगीत सामग्री तक – हमारे सुनने का एनालॉग संस्करण है; श्रोता का दिमाग ध्वनि तरंगों को संगीत में बदल देता है,” बेन-ताल ने कहा। “एआई का संस्करण बहुत कम परिष्कृत है; बहुत अधिक आदिम और सरलीकृत।

“लेकिन डेविड से प्राप्त सामग्री, वास्तविक समय में, एआई द्वारा संगीत प्रतिक्रियाओं को उत्पन्न करने के लिए उपयोग की जाती है। सामग्री को संगीतमय संवाद की भावना पैदा करने के लिए आविष्कारशील तरीकों से पुनर्संयोजित किया जाता है,” बेन-ताल ने कहा।

डोलन का कहना है कि उन्होंने इस प्रोजेक्ट और परफॉर्मेंस के लिए कुछ खास तैयार नहीं किया। “मैं अपनी संगीत गतिविधि के एक भाग के रूप में पिछले 35 वर्षों से शास्त्रीय सुधार का विकास और प्रदर्शन कर रहा हूं, लेकिन जैसा कि कहा गया है, हमेशा मानव प्रदर्शन करने वाले कलाकारों के साथ।”

बेन-ताल का कहना है कि इस प्रकार का प्रदर्शन चल रहे रचनात्मक-अनुसंधान परियोजना का हिस्सा है।

डोलन का कहना है कि और भी संगीत कार्यक्रमों की योजना है।

“लेकिन अधिक महत्वपूर्ण रूप से अधिक रिहर्सल जो अनुसंधान सत्र भी हैं, जिसमें से एआई में सुधार होता है और मेरी संगीत भाषा से संबंधित अधिक परिष्कृत तत्वों में ओडेड फीड होता है,” डोलन ने कहा।

संगीत अर्थ और रचनात्मकता

बेन-ताल ने कहा, “हम अपने आशुरचना को संगीत के रूप में विकसित करना जारी रखते हैं क्योंकि हम दिलचस्प सवालों पर विचार करते हैं।” “इनमें वे प्रश्न शामिल हैं जो संगीत सिद्धांतकार कई वर्षों से विचार कर रहे हैं: संगीत संरचना और संगीत अर्थ के बारे में, जिसे अब हमारे पास एआई इंजीनियरिंग के क्षेत्र में वर्षों से संचित कुछ संगीत ज्ञान को फिर से लाने और लाने का अवसर है।”

बेन-ताल कहते हैं कि उत्पन्न होने वाले अन्य महत्वपूर्ण प्रश्न रचनात्मकता के अर्थ, रचनात्मक प्रक्रिया और कैसे नई तकनीक को सार्थक और उपयोगी रूप से एकीकृत किया जा सकता है, से संबंधित हैं।

“फिलहाल यह न केवल दो विशेषज्ञ मानव कलाकारों के बीच एक जोड़ी से बहुत दूर है, बल्कि एक पूरी तरह से अलग खेल भी है,” डोलन ने कहा। “एक इंसान के रूप में, मुझे अपनी संगीत स्वतंत्रता और सहज अभिव्यंजक इशारों और विचारों के विस्फोट को सीमित करना होगा ताकि एआई जहाज पर बना रहे, जिससे जोड़ी को वास्तविक समय में समझ में आने में सक्षम बनाया जा सके – सुधार करते समय यह कहां जा रहा है मुख्य प्रश्न, और जिज्ञासा मुझे जारी रखती है।

बेन-ताल का कहना है कि वह एआई को एक सह-रचनात्मक उपकरण के रूप में देखता है।

“एक रचनात्मक प्रक्रिया के हिस्से के रूप में एआई का उपयोग करके इसके कई उपयोग हैं: चाहे वह किसी बड़ी परियोजना के भीतर कुछ रचनात्मक कार्यों को पूरा करने के लिए हो, या एक भागीदार के रूप में जो दिलचस्प और अप्रत्याशित विचारों को मिश्रण में डाल सकता है जो आगे की प्रेरणा का कारण बनता है,” जोड़ा गया बेन-ताल।