Cos'è Jukebox di OpenAI e cosa puoi farci?

Cos'è Jukebox di OpenAI e cosa puoi farci?
I lettori come te aiutano a sostenere MUO. Quando effettui un acquisto utilizzando i link sul nostro sito, potremmo guadagnare una commissione di affiliazione. Per saperne di più.

L'IA generativa si sta lentamente diffondendo in sempre più discipline nel settore creativo. È iniziato con i generatori di arte AI e poi si è diffuso alla scrittura con testo generato dall'IA. Ora possiamo aggiungere musica a quell'elenco.





Nel prossimo futuro, la musica generata dall'intelligenza artificiale, generata da zero, diventerà una realtà. In effetti, è già una possibilità con Jukebox, il modello di intelligenza artificiale per la creazione di musica di OpenAI. Non è ancora disponibile in un'applicazione facile da usare e non suona ancora abbastanza bene, ma le ossa algoritmiche ci sono.





MAKEUSEOF VIDEO DEL GIORNO SCORRI PER CONTINUARE CON I CONTENUTI

Ecco cosa devi sapere su Jukebox di OpenAI e cosa puoi fare con esso.





Jukebox: intelligenza artificiale che genera musica come audio grezzo

Jukebox è una rete neurale in grado di generare musica in formato audio grezzo quando gli dai input come genere, artista o testi. È stato rilasciato nell'aprile 2020 da OpenAI, la stessa azienda che ci ha portato il generatore di arte AI chiamato Dall-E e il chatbot AI chiamato ChatGPT.

A differenza di Dall-E, che si è diffuso rapidamente in tutto il mondo e ha reso l'intelligenza artificiale un argomento febbrile di notizie e media, Jukebox non ha registrato una vasta gamma di interesse dopo il suo rilascio. Uno dei motivi è che non ha un'applicazione web user-friendly, almeno non ancora.



Puoi trovare il codice sul Sito web di OpenAI , insieme a una spiegazione approfondita del funzionamento del processo di codifica e decodifica.

Un'altra probabile ragione è che ci vuole un'enorme quantità di tempo e potenza di calcolo. Per darti un'idea, il rendering di un solo minuto di audio può richiedere 9 ore. Avrai bisogno della volontà di esplorare il modello nella sua forma in codice, oltre a molta pazienza se vuoi vedere cosa può fare un modello AI per generare musica.





Oppure puoi saltare al Jukebox Sample Explorer . Qui è dove OpenAI ha pubblicato i suoi esperimenti dalla generazione di canzoni a somiglianza di Ella Fitzgerald o 2Pac.

  Screenshot di Jukebox Sample Explorer che mostra un elenco di campioni generati dall'intelligenza artificiale

Per essere chiari, altri strumenti musicali AI esistono per aiutarti a generare una canzone, ma non generano audio da zero. Invece, stanno combinando campioni preregistrati o creando informazioni MIDI che vengono trasmesse attraverso un sintetizzatore digitale.





Come suona Jukebox?

I risultati di Jukebox sono riconoscibili ma strani. Non è difficile capire la forma della canzone e il genere a cui appartiene, ma la qualità dei risultati fa sembrare che si stia ascoltando la prima musica registrata: cioè ovattata da molto rumore.

È sicuro dire che Jukebox non produce il tipo di suono ad alta fedeltà che sentiresti da un paio di buone cuffie. È più simile all'ascolto di musica da una stazione radio che non è completamente sintonizzata sulla frequenza corretta. Alcune canzoni sono reinterpretazioni mentre altre sono continuazioni di canzoni esistenti. C'è anche una categoria per nuovi artisti e stili e testi inediti.

Nonostante la qualità del suono, i primi sperimentatori descrivono di essere rimasti sbalorditi dalla bellezza inquietante e dalla natura bizzarra della musica creata da Jukebox. 'Come una colonna sonora per documentare un paese sconosciuto con una cultura sconosciuta', scrive Merzmench su Medio .

Attualmente, i risultati sono tutt'altro che sufficienti per copiare, o addirittura sostituire, la musica creata dagli esseri umani, ma la tecnologia si sta muovendo rapidamente e, abbastanza presto, anche modelli come Jukebox saranno in grado di realizzare queste imprese.

Come è stato addestrato il jukebox di OpenAI

Parte del modo in cui Jukebox è in grado di creare musica che non è mai esistita prima è che è addestrato sulla musica di veri musicisti. OpenAI spiega che:

'Per addestrare questo modello, abbiamo scansionato il Web per curare un nuovo set di dati di 1,2 milioni di canzoni (di cui 600.000 in inglese), abbinato ai testi e ai metadati corrispondenti di LyricWiki.'

La ricerca per indicizzazione dei dati è una pratica utilizzata da alcune società di intelligenza artificiale per creare un insieme di dati che un modello di intelligenza artificiale può utilizzare per apprendere e prendere decisioni durante la generazione di un'immagine, testo o, in questo caso, musica. I set di dati creati dalla scansione sono controversi perché il consenso non viene ottenuto dai proprietari dei dati in primo luogo. Tuttavia, alcune piattaforme te lo consentono escludere i tuoi contenuti dai set di dati .

Potresti pensare che 1,2 milioni di canzoni siano tante, ma in confronto, Dall-E 2 è stato addestrato su centinaia di milioni di coppie immagine-testo da Internet. Con questo in mente, Jukebox ha i suoi limiti.

Il suo pool di formazione relativamente piccolo non può catturare la ricchezza e la diversità della musica umana. OpenAI ha affermato di essere in gran parte addestrato sulla musica occidentale, rappresentando un chiaro pregiudizio su quale musica è in grado di generare.

Cosa puoi fare con Jukebox?

Quindi, con i suoi limiti in mente, cosa puoi fare con Jukebox? Un modo rapido per rispondere a questa domanda è dire cosa non puoi fare con Jukebox.

Poiché ci vuole quasi mezza giornata per eseguire il rendering di un minuto di musica, non è molto utile per produrre musica. Almeno, non nel senso tradizionale. Normalmente, i musicisti si muovono avanti e indietro tra suonare uno strumento (improvvisando) e pianificare la struttura di una canzone. Lo stesso tipo di sperimentazione non è possibile con Jukebox.

Dal momento che non è facile creare una canzone con Jukebox in questa fase, puoi pensarla più come un nuovo modo per generare campioni musicali. Dopo aver generato l'audio che ti piace, puoi usarlo nei tuoi progetti creativi come faresti normalmente.

Il video qui sotto è il risultato di qualcuno che usa la musica creata con Jukebox per sottolineare un breve video di montaggio.

come estrarre i dati da un vecchio disco rigido

L'intelligenza artificiale ha una vasta gamma di applicazioni anche al di fuori delle applicazioni creative, motivo per cui vale la pena capire cos'è l'IA e i pericoli che pone .

Sei commosso dalla musica AI?

La musica generata da Jukebox non è facile da ignorare e, nonostante tutta la sua stranezza e inquietante qualità uomo-macchina, alla fine suona come musica. Mentre l'industria musicale utilizza da tempo strumenti di intelligenza artificiale, la possibilità di generare musica come audio grezzo è solo ora una realtà.

Ma sebbene esistano modelli come Jukebox, devono ancora essere impacchettati in uno strumento commerciale e non sono ancora all'altezza delle capacità dei musicisti umani.