Como a IA está transformando a criação musical na Web3

Em abril de 2023, a diretora digital e vice-presidente executiva de desenvolvimento de negócios do Warner Music Group, Oana Ruxandradisse ao The Hash do CoinDesk que ela espera que ferramentas musicais impulsionadas por inteligência artificial (IA) “abram o mundo como T fizemos antes”, inspirando “novas formas de criatividade e subgêneros” nas indústrias de música e entretenimento.

Embora a perspectiva de Ruxandra seja otimista, ela também reconheceu as preocupações de muitos músicos: “Temos que ser muito vigilantes”, disse ela, observando a importância de proteger a criatividade e os direitos dos artistas. Poucos dias antes da aparição de Ruxandra no The Hash, um vídeo gerado por IAfalso profundofaixa musical intituladaCoração na minha mangaganhou força ao imitar as vozes dos compositores Drake e The Weeknd – embora nenhum dos artistas tenha participado de sua criação. Em vez disso, os criadores da música treinaram o robô de inteligência artificialusando música dos artistas, o que irritou o dono da gravadora Universal Music Group.

Outros músicos foram mais receptivos à nova Tecnologia. Menos de uma semana depois, o músico de electropop Grimes convidado seus fãs para criar suas próprias músicas dubladas por IA usando sua voz e estendeu a oferta para dividir os royalties 50/50, demonstrando uma solução criativa para o enigma do deep-fake de IA.

Manter a propriedade intelectualdesafios em mente, ainda não há dúvidas de que as ferramentas musicais de IA podem colocar novas formas de expressão na ponta dos dedos de um artista. Às vezes, a IA pode até ser usada para aprimorar a produção musical preenchendo lacunas técnicas ou intelectuais nas habilidades de um artista, ajudando-o a dar vida a conceitos ambiciosos em questão de cliques. Essas ferramentas também podem executar tarefas de engenharia de som de forma mais eficiente, diminuindo barreiras e o tempo que leva para lançar música.

À medida que olhamos para a Web3, empresas e artistas estão levando a IA ainda mais longe ao combinar música com experiências imersivas, interativas e geradas pelo usuário no metaverso e além.

Ferramentas de música de IA no Web3

Vários músicos e plataformas criptonativos já encontraram maneiras criativas de integrar ferramentas de IA em suas práticas.

Pegar VNCCII, por exemplo, o alter ego metaverso da produtora Samantha Tauber, de Sydney. Utilizando a ferramenta de criação 3D em tempo real líder da indústria, Unreal Engine, Tauber veste seu avatar para transmitirentrevistas transmitidas ao vivodo metaverso, além de se apresentar em shows e shows virtuais. Como qualquer mudança de cenário ou figurino, o componente digital da identidade artística de VNCCII está expandindo as fronteiras de sua arte.

Empresa de música Web3PIXELNYX combina experiências de realidade aumentada (AR) com jogos de metaverso e está focada em ajudar artistas a criar experiências memoráveis ​​para os fãs. Cofundada pelo produtor de música eletrônica Deadmau5, que é conhecido por enviar fãs missões através do The Sandbox e hospedando shows em DecentralandO PIXELNYX visa evoluir nossas noções tradicionais de fandom por meio do uso de IA, Web3 e conteúdo gerado pelo usuário (UGC).

Em abril, a PIXELNYX lançouCoro, uma ferramenta que permite aos usuários criar acompanhamentos musicais com tecnologia de IA usando conteúdo de artistas oficialmente licenciados.

Quando usadas com esse espírito, as ferramentas musicais de IA podem auxiliar, aumentar ou aprimorar o estilo criativo de um artista. Embora as ferramentas ainda não sejam boas o suficiente para substituir artistas, elas são impressionantes e estão constantemente “aprendendo” por meio da interação Human contínua. Substituir músicos por IA nunca foi uma abordagem popular, como comprovado pela rejeição que o Spotify recebeu após testando sua própria versão de curadoria musical artificial. No entanto, apesar da controvérsia em torno da IA, os artistas musicais de hoje podem se beneficiar do uso da produção musical assistida por IA de maneiras que respeitem o ofício.

Ideação e colaboração

Som de urdidura, uma plataforma de música de IA adaptável, encontrou várias maneiras de integrar colecionáveis baseados em blockchain e avatares digitais em suas ofertas de negócios. A empresa, que produz conteúdo musical, tokens não fungíveis (NFTs) e experiências sociais, lançará em breve uma API de software que compõe músicas originais nota por nota em diversos estilos.

Fundador e CEOChris McGarry, um empreendedor e executivo de mídia que anteriormente atuou como líder musical na unidade de realidade virtual Oculus do Facebook, diz que as ferramentas da WarpSound ajudam os artistas a encontrar novas inspirações e materiais de origem que revigoram seus processos criativos. A empresa é a beneficiária do The SandboxFundo para Maker de Jogos, que apoia designers de jogos no metaverso The Sandbox e planeja construir um espaço dentro da plataforma onde os artistas podem experimentar música generativa.

A WarpSound também trabalhou com a Mastercard como parceira musical de IA para seuAceleradora de Artistasprograma, onde McGarry diz ter observado novos benefícios no processo criativo.

“Na semana passada, eu estava em um conjunto de sessões de estúdio virtual com artistas que participavam do programa”, disse McGarry. “Estávamos trabalhando com nossa interface musical de IA generativa para apresentar um conjunto de ideias musicais, então fazendo com que o artista as moldasse e iterasse até que chegasse a algo, cuja essência ressoasse com eles, com o qual eles estivessem motivados a trabalhar.”

A WarpSound também fez parceria com o Tribeca Film Festival e o YouTube para criar experiências musicais interativas e divertidas entre artistas e público.

Composição e arranjo

Se o seu projeto musical for menos sobre performance ao vivo e mais sobre o produto final — talvez você esteja compondo música original para um podcast, evento do metaverso, canal do YouTube, videogame Web3 ou conteúdo educacional — você pode usar IA para acelerar o processo de composição e arranjo. Claro, os virtuosos mais talentosos do mundo provavelmente conseguem fazer escalas musicais dormindo, mas com tantos elementos para produção de som e vídeo, está se tornando uma prática padrão usar IA para inserir escalas QUICK , arpejos, runs e harmonias em músicas originais.

Ferramentas comoRiffusãopermitir que os usuários forneçam prompts de texto que são transformados em música.sonoroé outra plataforma de IA que permite que as pessoas gerem e baixem faixas livres de royalties.

Se você quiser dar um passo adiante e adicionar letras, a popular ferramenta faz-tudo Bate-papoGPT consegue escrever uma música de dois versos com um pré-refrão, refrão, ponte e outro em menos de 30 segundos com o mínimo de estímulo. Claro, a letra pode ser um pouco simplista ou cafona — mas T são algumas das melhores músicas?

Na maioria dos casos, músicas geradas por IA são reproduzíveis sem a necessidade de pagar taxas de licenciamento, já que foram feitas por máquinas e, portanto, não são protegidas pela lei de propriedade intelectual dos EUA. A maioria das plataformas, no entanto, cobra uma taxa de assinatura.

Esses sons podem então ser cunhados como NFTs e vendidosmercados como o OpenSea. Plataformas comoRoyal.iotambém permite que artistas se juntem ao site e ofereçam suas músicas como NFTs fracionados que oferecem pagamentos de royalties aos fãs.

Leia Mais: O que são NFTs de música?

Os limites da produção musical de IA

Você já deve ter ouvido que as ferramentas musicais de IA ainda T são tão sofisticadas, especialmente quando comparadas aos mais recentes geradores de texto para imagem de IA (que já foram usados ​​para gerar coleções de histórias em quadrinhos) e o chatbot da Open AI, Chat GPT (que supostamentepassou no exame da Ordem).

A produção de AUDIO de fato requer mais poder computacional do que saídas de texto e imagem estáticas e, portanto, está atrasada, de acordo com especialistas na área. Alexandre Flores, chefe de tecnologia e estratégia na rede de pesquisa musical,Água e Música, diz que a inovação tecnológica geralmente viaja dos formatos menos intensivos em dados para os mais ricos. No caso da IA, faz sentido que chatbots sejam talvez mais rápidos de desenvolver do que renderização de AUDIO e vídeo por IA.

Em um tópico de discussão online, um usuário do Reddit apontou essas limitações, enfatizando que, embora um escritor possa revisar e editar as saídas de um chatbot de IA em segundos, leva vários minutos para ouvir uma música e, às vezes, até horas para editá-la. As máquinas também são mais lentas para Aprenda com conjuntos de dados de IA, pois os arquivos de AUDIO que as alimentam raramente têm descrições de texto abrangentes para ensinar à IA sobre os atributos do arquivo (gênero, andamento, tom, instrumentação, ETC). Enquanto isso, IAs baseadas em texto e imagem podem rapidamente vasculhar milhares de palavras e visuais.

“Quanto tempo leva para consumir o conteúdo importa muito”, disse Flores. “Com uma música, você fica preso por três minutos. Você T pode acelerar porque então você não está vivenciando a música real como ela foi escrita.”

Além disso, as imagens são estáticas, enquanto as músicas são mais dinâmicas: “O AUDIO é muito mais dimensional”, disse Stefan Lattner, pesquisador gerente emSony CSL, um laboratório de Tecnologia criativa, em um painel na inauguração da Water & Music Cume dos comprimentos de onda. “Enquanto as imagens têm um número fixo de pixels, no AUDIO você tem um número variável de segundos que deseja gerar.”

No entanto, a Water & Music considera a IA criativa a Tecnologia mais disruptiva para o negócio da música desde Napster, o aplicativo de compartilhamento de arquivos ponto a ponto que tornou a distribuição de música praticamente gratuita, além de sem fronteiras e sem permissão – um conceito familiar aos nativos de criptomoedas.