Visão geral
- Braço de pesquisa do Google, Magenta, desenvolveu uma rede neural profunda para gerar som
- Para usar o algoritmo, também lançou um instrumento de hardware de código aberto chamado NSynth Super
- Ele foi criado usando bibliotecas como TensorFlow e openFrameworks.
- Eles lançaram o código completo no GitHub para que você possa criar seu próprio instrumento do zero.
- Assista aos vídeos abaixo para mais detalhes.
Introdução
O campo do processamento de áudio atraiu grande interesse com o surgimento do aprendizado profundo. Mas, E se você estiver trabalhando na indústria da música e se deparar com o bloqueio de um músico (nas mesmas linhas de um bloqueio de escritor)? Você tem algumas idéias iniciais, mas a música simplesmente não flui para você.
O Google também tem uma resposta para isso.
Magenta, O braço de pesquisa do Google que encontra alternativas ao uso de inteligência artificial para ajudar a imaginação das pessoas, desenvolveu um instrumento que chama NSynth Super. É baseado no algoritmo NSynth que usa uma técnica de rede neural profunda para gerar som.. NSynth foi lançado pelo Google há alguns meses.
Em vez de gerar notas musicais, NSynth replica o som de um instrumento. O que torna o algoritmo único é que ele aprende continuamente as qualidades essenciais do que constitui um som individual e é capaz de combinar vários sons para gerar algo absolutamente novo..
NSynth Super es un instrumento experimental open source. Fornece aos músicos (e seguidores de aprendizagem profunda) a capacidade de explorar sons absolutamente novos gerados pelo algoritmo de aprendizado de máquina NSynth. Ele foi criado usando bibliotecas de código aberto como TensorFlow e openFrameworks.
O instrumento pode ser tocado por meio de qualquer fonte MIDI, como um teclado ou sequenciador.
Você pode construir sua própria interface NSynth Super seguindo o código passo a passo e as instruções fornecidas pelo Google em seu Repositório GitHub.
Para cavar no algoritmo e obter o conjunto de dados por trás do NSynth, vá para o google blog aqui.
Veja o Google Video de NSynth abaixo:
https://www.youtube.com/watch?v=iTXU9Z0NYoU
Veja também como o instrumento NSynth Super funciona abaixo:
Nossa opinião sobre isso
As instruções fornecidas pelo Google em sua página GitHub são detalhadas e o ajudarão a criar o instrumento passo a passo. (Provavelmente) você não conseguirá fazer um tão bonito quanto o do Google, mas será capaz de gerar sequências de som malucas para começar.
Esta é uma mina de ouro para entusiastas do aprendizado profundo que estão interessados na área de processamento de áudio.. À frente, verifique o código, experimente e construa seu próprio banco de dados de música!
