Pipes

Workflows as Processes with Tools

Pipe 02: da file SID alla partitura con Noteflight

Noteflight


E' passato già più di un anno dalla prima PIPE pubblicata qui su masayume. Anche questa volta si tratta di concatenare tool per elaborare un file audio partendo dal glorioso formato SID del Commodore 64 e arrivando ad ottenere una partitura, usando un bellissimo tool free e online: Noteflight.

1) Il primo passo è scovare un file sid di proprio gradimento, ad esempio su hvsc.c64.org
2) con il tool free sid2midi si ottiene il file midi, che si può caricare su...
3) Noteflight schiacciando il bottone "create" e scegliendo l'opzione MIDI.
4) voilà, partitura pronta.

facebook
youtube
twitter

[via]

GANsynth: musica con sample generati dall'intelligenza artificiale

pipes pipe02

GANsynth DEMO


Questa incredibile GANsynth demo su google colab mostra la generazione dinamica di sample con l'uso del machine learning ed il loro utilizzo nell'esecuzione di un brano MIDI.

Il modello GANsynth viene generato con un training di 3, 4 giorni con una singola scheda TESLA V100 elaborando il NSYNTH dataset, un archivio disponibile che contiene 69 GB di sample sonori di alta qualità.

Una volta imparato, il modello è in grado di eseguire un brano qualsiasi in tempo reale, generando al contempo i sample sonori necessari, il tutto direttamente operabile via browser.

Oltre ad essere piuttosto stupefacente, per la profondità e l'efficacia della simulazione e la facilità di utilizzo, la cosa davvero sbalorditiva è la rapidità con la quale questi modelli di intelligenza artificiale migliorino di mese in mese, soppiantando potenzialmente intere filiere di software.

Unendo i puntini non è difficile intravvedere l'avvento della più grande rivoluzione della storia umana.

Pipe:

1) si parte da un qualsiasi midi file (o da un sid convertito con sid2midi)
2) si carica l'ambiente GAN nel colab notebook e si generano e scelgono i sample
3) si ottiene un brano con timbri che derivano dai sample NSYNTH.

GANsynth
GANSynth: Adversarial Neural Audio Synthesis


Pipe 01: Dall'esecuzione video al pianoforte alla partitura e file midi

pipeline 01 - from youtube piano to music sheet, midi and 3d piano


Le "pipe" qui su masayume prendono il nome dalle sequenze di comandi in unix. L'idea è quella di definire un processo che, per mezzo di vari tool, parte da "A" e, attraverso una serie di passi o trasformazioni, arrivi ad ottenere "B".

In questo primo caso vediamo come sia possibile, partendo da un video su youtube di una esecuzione (ad esempio) al pianoforte, ottenere la partitura e il file MIDI. Un risultato tutt'altro che scontato.

1) si parte dal video su youtube dell'esecuzione al pianoforte
2) usando ad esempio il comando "youtube-dl -F <URL-VIDEO>" si individua il formato audio e si scarica in locale il file m4a
3) Per operare la conversione da m4a a mp3 si può usare VLC
4) La trascrizione si ottiene facendo upload su lunaverus.com
5) Si ottengono la partitura in formato pdf, il file audio midi e anche il formato mxl (musicXML).

6) bonus: Si può fare upload nel "3D piano" del midi ottenuto e avere l'esecuzione automatica del brano.