Come funzionano i set di dati AI e come gli artisti possono collaborare con loro

Alcuni dei momenti culturali più iconici sono avvenuti come risultato di collaborazioni, da Jean-Michel Basquiat e Andy Warholfamoso sindacato del 1983alle edizioni limitate di oggi lanciate da artisti contemporanei e case di moda.

Le collaborazioni riuniscono diverse prospettive, competenze e influenze, dando vita a creazioni uniche e spesso rivoluzionarie. Oggi, gli artisti stanno espandendo i loro orizzonti collaborativi attraverso partnership con una forza creativa piuttosto non convenzionale: l'intelligenza artificiale (IA).

"Nei giorni in cui hai a che fare con il blocco dello scrittore, o le sinapsi T si attivano in un certo modo, è stato davvero bello vedere la Tecnologie [AI] innescare quel FLOW creativo ed espandere il regno dell'ideazione e delle possibilità per gli artisti", ha affermato Chris McGarry, fondatore e CEO della piattaforma musicale AI. Deformazione del suono.

Ma se hai mai provato a usare il modello linguistico dell’IAChatGPT, ha inserito un prompt sperimentale nel modello testo-immagineDiffusione stabileo giocato con il generatore di testo in musica di GoogleMusicaLM, potresti aver notato che l'IA T riesce a leggere la mente, almeno non ancora. I tuoi primi tentativi di lavorare con gli strumenti di IA potrebbero dare come risultato output generici o semplicemente output che T catturano esattamente ciò che avevi in ​​mente.

"Sono pessimi", ha scherzato ONE musicista sulla sua esperienza nel provare i generatori di musica AI. Il commento è stato fatto a maggio durante un workshop sulla produzione musicale AI all'inaugurazione Vertice sulle lunghezze d'ondaa Brooklyn, New York, ospitato dalla rete di ricerca musicale Water & Music. I partecipanti del pubblico hanno concordato che gli strumenti di intelligenza artificiale, sebbene sofisticati, comportano comunque una notevole curva di apprendimento.

Per i creativi, affrontare l'apprendimento automatico richiede di capire come alimentarlo al meglio con i dati e perfezionarne l'algoritmo per integrare i propri sforzi artistici.

Come funzionano i set di dati

ONE dei modi principali in cui gli artisti possono sfruttare la potenza dell'IA è creare i propri set di dati, in genere composti da testo, immagini, suoni, melodie e video. Ogni progetto di apprendimento automatico potrebbe richiedere set di dati di formazione di dimensioni diverse per avere successo. Ci sono molti strumenti utili corsi E videodisponibili online che spiegano al meglio come ottimizzare i set di dati.

Per creare uno strumento potente che sembri ancora "autentico", gli artisti possono addestrare le macchine in base al loro lavoro precedente. Ciò può aiutarli a distinguere le loro collaborazioni AI da quelle generate da modelli gratuiti e open source, che tendono a utilizzare dati disponibili al pubblico e possono talvolta risultare aridi e generici.

In generale, i dati di un modello di IA gratuito provengono da fonti pubblicate pubblicamente. I dati vengono spesso procurati da bot che scansionano Internet e raccolgono materiale grezzo ampiamente disponibile e catalogano le informazioni. Nel frattempo, le aziende private e le società di ricerca hanno maggiori probabilità di utilizzare set di dati proprietari, in particolare quando le leggi sul copyright sono una preoccupazione.

"Dobbiamo trovare modi di utilizzare i dati che siano legali", ha affermato Michael Turbot, responsabile della promozione Tecnologie presso Laboratorio di informatica Sony (CSL)Parigi, un laboratorio di ricerca indipendente, durante il Wavelengths Summit. Il laboratorio sta lavorando suProduzione musicale assistita dall'intelligenza artificialestrumenti per artisti.

Secondo Turbot, Sony CSL è soggetta a un processo di verifica da parte di Sony Music Publishing per poter lavorare con qualsiasi artista attualmente sotto contratto con la casa editrice. Sony CSL ha quindi fatto attenzione a includere solo suoni e canzoni legalmente ermetici nei suoi set di dati, optando solo per canzoni di pubblico dominio o canzoni appartenenti ad artisti che lavorano in partnership con Sony CSL e che hanno dato un'autorizzazione esplicita.

"Dobbiamo essere estremamente attenti all'uso che facciamo dei dati", ha detto Turbot. "Altrimenti sappiamo che le porte verrebbero chiuse all'istante dalle persone, sia nel loro settore che con gli artisti".

Creare il proprio set di dati

Come le aziende private e i laboratori, gli artisti possono curare i propri set di dati utilizzando il proprio materiale. Compilare il set di dati corretto è fondamentale per garantire che l'IA catturi accuratamente lo stile e la voce unici di un artista. Il set di dati funge da fondamento per gli algoritmi dell'IA, guidandone il processo decisionale.

Perfezionare un set di dati AI implica un processo in più fasi. Inizia con la raccolta di materiale sorgente di alta qualità, sia dalla musica dell'artista che da opere che riflettono lo stile desiderato. Alcuni artisti possono unire diversi set di dati per rappresentare le ere della loro evoluzione creativa o scegliere di creare set di dati unici per ogni nuovo progetto.

"Ultimamente ho ripreso vecchi disegni di quando ero molto giovane", ha detto l'artista AI fotorealisticaClaire Argentoin un febbraioSpazio Twitter. "Li ho inseriti nell'IA con dei prompt per provare a ricreare ciò che vedevo allora e che cercavo di disegnare, ma T avevo le capacità per condividerlo. Ed è stato davvero fantastico."

Silver ha affermato di utilizzare una combinazione di modelli di intelligenza artificiale, tra cuiStudio dei sogni E NMKD.

L'artista letteraria Sasha Stiles, che collabora con i modelli linguistici GPT dal 2018, afferma di personalizzare i suoi set di dati con un "compendio di materiali di formazione" che è iniziato con le bozze del suo manoscritto e tutta la sua "poesia Human ". Ha poi aggiunto note di ricerca, materiale di riferimento e letteratura stimolante.

"Nascosti lì dentro [c'erano] poesie e saggi che erano pertinenti alle cose di cui stavo scrivendo", ha detto Stiles. "Ci sono estratti da T.S. Eliot, ci sono passaggi da Whitman e Dickinson e ci sono in realtà piccoli pezzi e frammenti da vari articoli di giornale".

Stiles ha aggiunto che lavorare con un modello linguistico basato sull'intelligenza artificiale è stato come "prendere tutte le cose che mi frullavano per la testa mentre lavoravo al mio manoscritto, inserirle in un sistema e usare algoritmi per sintetizzarle".

Con ogni mezzo, la qualità del set di dati di un artista è importante per produrre il miglior risultato, ma per i musicisti in particolare, la qualità AUDIO è di grande importanza. "Quando un produttore o un artista utilizza un modello, è essenziale capire che la qualità della voce in ingresso è vitale", ha affermato Geraldo Ramos, CEO di Moisè, un'app che consente ai musicisti di creare una libreria personalizzata di canzoni. "Se il cantante si esibisce male, l'output sarà pessimo quanto l'input."

Lascia che l'intelligenza artificiale ti estenda artisticamente

Nonostante ilprevisti 42,6 miliardi di dollaririversati negli investimenti in AI generativa oggi, le collaborazioni artistiche con l'AI sono ancora sperimentali. Curare e perfezionare un set di dati AI richiede una comprensione dell'apprendimento automatico, attenzione ai dettagli, molta pazienza e ampia curiosità.

Detto questo, l'uso dell'intelligenza artificiale nelle industrie creative T sembra essere una tendenza passeggera. L'idea in sé risale al 1959, quando il primo libro sulla composizione musicale assistita dal computerè stato pubblicato e sembra solo accelerare con l'ascesa del gioco metaverso eToken non fungibili (NFT) basati sull'intelligenza artificiale.

Mentre l'intelligenza artificiale offre incredibili opportunità per i creativi, alcunicontinuare a esprimere preoccupazioni sui suoi casi d'uso, sostenendo che l'IA non può sostituire le emozioni Human , né la connessione che si forma tra artisti e fan. Ma se vuoi collaborare con l'IA in modi che rispettino la tua arte mentre fai evolvere il tuo lavoro, creare il tuo set di dati è un ottimo modo per iniziare.