Come ascolta CueFlip
Un percorso illustrato tra il momento in cui un musicista suona e quello in cui la pagina si volta: come CueFlip ascolta la musica, trova il punto in cui si trova nello spartito e che cosa fa quando lo perde.
Tradotto dall’inglese. Leggi l’originale
CueFlip è un voltapagine automatico per iPad e iPhone. La tecnica che sta alla base si chiama inseguimento della partitura (in inglese score following): ascoltare un'esecuzione dal vivo e tenere traccia del punto in cui ci si trova negli spartiti. Questo articolo spiega come funziona, un'immagine alla volta.
Una macchina che ascolta
Nel 1774 gli orologiai svizzeri Pierre Jaquet-Droz, suo figlio Henri-Louis e Jean-Frédéric Leschot presentarono The Musician, un automa che suonava con le dita un vero organo. Sapeva suonare, ma non sapeva sentire. CueFlip è l'opposto. Non suona nulla. Ascolta.
Non legge la notazione sulla pagina. Impara come suona un brano preciso quando lo suoni tu, e poi riconosce di nuovo quel suono mentre esegui.
Imparare il brano una volta sola
In Learn suoni il brano per intero una volta, oppure importi una sua registrazione, e segni i punti in cui si voltano le pagine. Quella registrazione è il riferimento. Tutto il resto è un confronto tra ciò che stai suonando ora e ciò che hai suonato allora.
Che cosa sente
Una registrazione contiene molto più di quanto serva per trovare un punto in un brano. CueFlip ne conserva due cose. La prima è quali nomi di nota stanno suonando, momento per momento. Una nota conta con il suo nome, in qualunque ottava venga suonata, quindi suonare un'ottava sopra o sotto dovrebbe contare meno. Una sala diversa o uno strumento diverso possono comunque influire su quanto bene CueFlip segue.
Ogni traccia nell'immagine è un nome di nota seguito per mezzo minuto di musica: lettere per i tasti bianchi, puntini per quelli neri. Il nastro si attorciglia dove cambia l'armonia, e le note più forti sono disegnate in grassetto. È un disegno di come un brano appare al motore, non l'immagine di uno spartito.
Quando, oltre a che cosa
I nomi delle note dicono che cosa suona. Non dicono quando qualcosa è iniziato. Per questo CueFlip divide il suono in bande, dalle note più gravi agli armonici più brillanti, e controlla in ogni banda il momento in cui qualcosa comincia: un arco, una corda, un martelletto.
Insieme, le due informazioni gli danno una breve descrizione di ogni istante dell'esecuzione, che può confrontare con il riferimento.
Trovare il punto
Non suonerai alla velocità del tuo riferimento. Acceleri, indugi, respiri. Per questo il motore non confronta i due momento per momento. Cerca il percorso migliore tra tutti i modi in cui i due potrebbero allinearsi, e lascia che quel percorso si pieghi per seguire il tuo tempo.
Il percorso non può vagare liberamente. Nell'immagine la linea arancione è il percorso e le linee tratteggiate indicano quanto può allontanarsi dal centro. Un percorso che salta qua e là è più probabilmente un errore che un musicista.
Quando perde il punto
La musica si ripete. Quando una sezione ritorna, suona allo stesso modo, e per un attimo il motore ha due risposte oneste: qui, oppure là. Tu sai qual è giusta. Il motore deve scoprirlo.
A volte sceglie quella sbagliata, e la posizione che indica si allontana da quella in cui ti trovi davvero. Per sicurezza, CueFlip tiene due letture del tuo punto: una che segue l'esecuzione da vicino e una che tiene d'occhio l'intero brano e si muove più lentamente. L'immagine le disegna come i due filamenti di un'elica. Quando concordano, i filamenti corrono vicini. Quando non concordano, l'elica si apre.
In questo esempio l'esecuzione torna a un passaggio già suonato. Per un po' entrambe le letture proseguono come se nulla fosse. Chi segue da vicino se ne accorge per primo e si riposiziona. Quella che guarda l'intero brano si corregge poco dopo, e i filamenti si riavvolgono insieme.
È la parte più difficile del lavoro, e CueFlip non sempre la risolve bene. Quando non è sicuro, si trattiene invece di voltare pagina a caso, e puoi sempre voltare tu la pagina.
Voltare la pagina
Un'esecuzione non dura mai esattamente quanto la registrazione da cui hai imparato. Nell'ultima immagine, la linea a sinistra è l'esecuzione stessa, qui più lenta della registrazione appresa, e scorre dall'alto in basso. La spirale a destra è lo spartito, avvolto come un rotolo. Ogni linea sottile unisce un momento dell'esecuzione al punto dello spartito in cui il motore credeva di trovarsi in quel momento.
Le cinque linee arancioni sono le voltate di pagina. Ognuna parte dal momento dell'esecuzione in cui CueFlip ha voltato la pagina e arriva al punto della registrazione appresa in cui hai segnato quella voltata. CueFlip volta la pagina un po' prima che tu raggiunga il punto segnato in Learn, così che la pagina successiva sia già lì prima che i tuoi occhi ne abbiano bisogno.
Dove tutto questo avviene
Tutto questo avviene sul tuo iPad o iPhone. Il suono viene analizzato mentre suoni e non viene inviato a CueFlip. Non ci sono account né tracciamento. Se attivi la sincronizzazione iCloud, usa il tuo iCloud.
Questa è l'idea nel suo insieme: imparare il brano una volta, ascoltare, trovare il punto, voltare la pagina. Il resto è cura, e moltissime prove con musicisti veri, che raramente suonano esattamente come sta scritto.