Você já imaginou criar uma música com a voz e o estilo do seu artista favorito? Pois agora será possível, usando apenas uma descrição em texto sobre o tema da canção. Essa é a proposta do Dream Track, uma ferramenta experimental do YouTube que usa a inteligência artificial (IA) para gerar músicas personalizadas e originais para os criadores de conteúdo.
Em suma, o Dream Track é uma solução que produz trechos de 30 segundos de canções com a voz e o estilo de nove artistas parceiros da iniciativa. Aliás, a ferramenta surge em parceria com o Google DeepMind e emprega o modelo de IA Lyria para a geração de conteúdo.
O Dream Track permite gerar músicas a partir de uma descrição em texto sobre o tema da canção. Dessa forma, a IA cria a faixa musical, a letra e a voz do artista escolhido. Os artistas que participam do projeto são: Alec Benjamin, Charlie Puth, Charli XCX, Demi Lovato, John Legend, Sia, T-Pain, Troye Sivan e Papoose. Contudo, eles são artistas de diferentes gêneros musicais que optaram por colaborar com a iniciativa do YouTube e do Google DeepMind. Isto é, eles permitiram que a IA Lyria imitasse a sua voz e o seu estilo para gerar músicas a partir de descrições em texto sobre o tema da canção.
Neste artigo, vamos conhecer mais sobre o Dream Track, o Lyria e os impactos que essas ferramentas podem ter sobre o processo de criação musical e a indústria da música.
O que é o Dream Track?
O Dream Track é uma ferramenta experimental do YouTube que usa a inteligência artificial para gerar músicas personalizadas e originais para os criadores de conteúdo. A ferramenta produz trechos de 30 segundos de canções com a voz e o estilo de nove artistas parceiros da iniciativa. A ferramenta foi desenvolvida em parceria com o Google DeepMind e emprega o modelo de IA Lyria para a geração de conteúdo.
O Dream Track permite gerar músicas a partir de uma descrição em texto sobre o tema da canção. A IA cria a faixa musical, a letra e a voz do artista escolhido. Por exemplo, se o usuário digitar “uma música de John Legend sobre o amor”, a ferramenta vai gerar um trecho de 30 segundos de uma canção com a voz e o estilo do cantor soul, com uma letra que fala sobre o sentimento amoroso.
Artistas no Dream Track
As opções são bem variadas. Isto é, Alec Benjamin, Charlie Puth, Charli XCX, Demi Lovato, John Legend, Sia, T-Pain, Troye Sivan e Papoose fazem parte do projeto. Eles são artistas de diferentes gêneros musicais e colaboram com a iniciativa do YouTube e Google DeepMind. Portanto, os criadores podem usar suas vozes sem se preocuopar com direitos autorais. Afinal, eles permitiram que a IA Lyria imitasse a sua voz e o seu estilo para gerar músicas a partir de descrições em texto sobre o tema da canção.
A proposta é que as faixas criadas pelo Dream Track sejam utilizadas como trilhas em Shorts, os vídeos curtos do YouTube. A ferramenta está em teste para um pequeno grupo de 100 criadores nos Estados Unidos. A princípio, o objetivo é oferecer aos criadores de conteúdo uma nova forma de gerar músicas personalizadas e originais para seus vídeos curtos, sem precisar de habilidades musicais ou licenças de direitos autorais.
Além disso, o Dream Track também visa aproximar os fãs de seus artistas preferidos, permitindo que eles criem músicas com eles e até mesmo interajam com eles através de feedbacks e sugestões.
Shorts
A proposta é que as faixas criadas pelo Dream Track sejam utilizadas como trilhas em Shorts, os vídeos curtos do YouTube. A ferramenta está em teste para um pequeno grupo de criadores nos Estados Unidos. O objetivo é oferecer aos criadores de conteúdo uma nova forma de gerar músicas personalizadas e originais para seus vídeos curtos, sem precisar de habilidades musicais ou licenças de direitos autorais.
Criação musical com IA
A produção/criação de músicas a partir de inteligência artificial é um tópico bem intrigante que vem crescendo com o tempo. Se você tem interesse no assunto, temos alguns conteúdos que falam sobre isso. Fica as sugestões! 😉
O que é o Lyria?
Uma plataforma de inteligência artificial generativa que cria músicas a partir de instruções em palavras ou voz. O Lyria é um projeto da DeepMind, uma empresa de pesquisa em IA que faz parte do Google.
A plataforma usa um modelo de IA avançado que é capaz de gerar músicas de alta qualidade com instrumentais e vocais, imitando o estilo e a voz de artistas famosos. Além disso, o Lyria também oferece recursos para criar faixas instrumentais do zero a partir do cantarolar de uma melodia ou transformar o áudio de um instrumento ou estilo musical em outro.
Aliás, o Lyria é uma das ferramentas que fazem parte do Dream Track, um experimento do YouTube que permite aos criadores de conteúdo gerar músicas personalizadas e originais para seus vídeos curtos, usando a voz e o estilo de nove artistas parceiros da iniciativa. O Dream Track também visa aproximar os fãs de seus artistas preferidos, permitindo que eles criem músicas com eles e até mesmo interajam com eles através de feedbacks e sugestões.
Sobretudo, o Lyria é uma ferramenta inovadora que promete revolucionar a forma como as pessoas criam e consomem música. A DeepMind diz que as tecnologias foram desenvolvidas de forma responsável, garantindo que elas vão impulsionar a criatividade em vez de substituí-la.
Quais são os benefícios e desafios do Dream Track e do Lyria?
O Dream Track e o Lyria trazem benefícios e desafios para o processo de criação musical e a indústria da música. Alguns dos possíveis benefícios e desafios são:
Benefícios:
- As ferramentas oferecem aos criadores de conteúdo uma nova forma de gerar músicas personalizadas e originais para seus vídeos curtos, sem precisar de habilidades musicais ou licenças de direitos autorais.
- As ferramentas aproximam os fãs de seus artistas preferidos, permitindo que eles criem músicas com a voz e o estilo deles, e até mesmo interajam com eles através de feedbacks e sugestões.
- As ferramentas estimulam a criatividade e a inovação, tanto dos criadores de conteúdo quanto dos artistas, ao oferecer novas possibilidades de expressão e experimentação musical.
- As ferramentas representam um momento de integração entre a indústria da música e a tecnologia de IA, levantando questões importantes sobre a identidade artística e o controle dos direitos autorais.
Desafios:
- As ferramentas ainda estão em fase experimental e só estão disponíveis para um pequeno grupo de criadores nos Estados Unidos, o que limita o seu alcance e a sua diversidade.
- As ferramentas só podem gerar trechos de 30 segundos de canções, não músicas completas, e só podem imitar a voz e o estilo de nove artistas parceiros da iniciativa, não de qualquer cantor.
- As ferramentas podem gerar conteúdos que infrinjam direitos autorais ou que não sejam adequados para o público-alvo, se não forem devidamente rotulados e verificados.
- As ferramentas podem afetar o processo tradicional de criação musical, alterando o papel dos artistas, compositores e produtores, e desafiando a noção de autoria e originalidade.
Esses são alguns dos benefícios e desafios que o Dream Track e o Lyria trazem para a criação musical e a indústria da música. A seguir, vamos ver como essas ferramentas funcionam e quais são as tecnologias envolvidas.
Como funcionam o Dream Track e o Lyria?
Ambas ferramentas usam a inteligência artificial (IA) para gerar músicas a partir de instruções em palavras ou voz. Em suma, a IA é uma área da ciência da computação que cria máquinas e sistemas capazes de realizar tarefas humanas. Alguns exemplos de tarefas: reconhecer imagens, compreender linguagem natural, aprender e criar.
O Dream Track e o Lyria usam um tipo específico de IA chamado de IA generativa, que é capaz de produzir conteúdos originais e criativos, como imagens, textos, vídeos e músicas . A IA generativa usa modelos matemáticos complexos que aprendem a partir de grandes quantidades de dados, como fotos, livros, filmes e canções, e depois geram novos dados baseados no que aprenderam.
Deepmind
O Dream Track e o Lyria usam um modelo de IA generativa chamado de Lyria, que foi desenvolvido pela DeepMind, uma empresa de pesquisa em IA que faz parte do Google. O Lyria é um modelo de IA avançado que é capaz de gerar músicas de alta qualidade com instrumentais e vocais, imitando o estilo e a voz de artistas famosos.
Lyria
A ferramenta usa uma arquitetura de rede neural artificial, que é um tipo de modelo matemático inspirado no funcionamento do cérebro humano, composto por camadas de unidades de processamento chamadas de neurônios artificiais. A uma rede neural artificial do Lyria é chamada de Transformer, que é um tipo de rede neural que usa mecanismos de atenção para capturar as relações entre os dados de entrada e saída.
O Lyria usa o Transformer para aprender a partir de milhares de músicas de diferentes gêneros e artistas. Em seguida, a ferramenta gera novas músicas baseadas nas instruções em palavras ou voz do usuário. Aliás, o Lyria usa dois módulos principais para gerar músicas: o módulo de síntese de áudio e o módulo de geração de conteúdo.
Módulos de criação
O módulo de síntese de áudio é responsável por criar a faixa musical, ou seja, os sons dos instrumentos e da voz do artista. Este módulo usa a síntese neural de áudio, capaz de gerar áudio de alta fidelidade a partir de uma representação simbólica – partitura ou uma letra. Além disso, o módulo usa uma rede neural chamada de WaveNet, capaz de gerar áudio de forma autoregressiva. Ou seja, predizendo o próximo valor de uma onda sonora baseado nos valores anteriores.
Por outro lado, o módulo de geração de conteúdo cria a partitura e a letra da canção. Ou seja, os símbolos que representam a melodia, a harmonia, o ritmo e as palavras da música. A técnica é chamada de geração neural de conteúdo. Ela é capaz de gerar conteúdo simbólico a partir de uma descrição em texto ou voz sobre o tema da canção. Aliás, o módulo usa uma rede neural chamada de GPT-3 – a mesma dos chatbots que conhecemos: ChatGPT, Bard, Bing e etc. Essa rede gera texto de forma autoregressiva, ou seja, predizendo a próxima palavra de uma frase baseada nas palavras anteriores.
O Dream Track e o Lyria funcionam de forma integrada. Isso acontece com o módulo de geração de conteúdo criar a partitura e a letra da canção a partir da descrição em texto. Posteriormente, temos o módulo de síntese de áudio criando a faixa musical a partir da partitura e da letra da canção. Assim, surge um trecho de 30 segundos de uma canção com a voz e o estilo do artista escolhido pelo usuário.
Exemplos de músicas geradas pelo Dream Track e pelo Lyria
O Dream Track e o Lyria são ferramentas que geram músicas personalizadas e originais para os criadores de conteúdo. A ferramenta está em teste para um pequeno grupo de 100 criadores nos Estados Unidos. Alguns dos exemplos de músicas geradas pelo Dream Track e pelo Lyria são:
- Uma canção de Charlie Puth sobre “como os opostos se atraem”, com um estilo acústico e animado.
- Uma canção de T-Pain sobre “uma manhã ensolarada na Flórida”, com um estilo R&B.
- Uma canção de Demi Lovato sobre “a autoestima”, com um estilo pop e poderoso.
- Uma canção de John Legend sobre “o amor”, com um estilo soul e romântico.
Confira o processo de criação de uma criadora americana:
A influencer foi uma das selecionadas pelo YouTube para testar a ferramenta e decidiu criar uma canção com a voz do Charlie Puth.
Os vídeos estão disponíveis no canal do YouTube do Dream Track. Lá onde você também encontra outros exemplos de músicas geradas pela IA e ouvir os depoimentos dos artistas envolvidos. Você também pode se inscrever para receber atualizações sobre o projeto e saber quando ele estará disponível para mais pessoas.
Em última análise…
O Dream Track e o Lyria são ferramentas experimentais do YouTube e do Google DeepMind. Aliás, ambas ferramentas usam a inteligência artificial (IA) para gerar músicas personalizadas e originais para os criadores de conteúdo. Em suma, o DT ferramenta produz trechos de 30 segundos de canções com a voz e o estilo de nove artistas parceiros da iniciativa. A ferramenta permite gerar músicas a partir de uma descrição em texto sobre o tema da canção. A IA cria a faixa musical, a letra e a voz do artista escolhido.
O Dream Track e o Lyria trazem benefícios e desafios para o processo de criação musical e a indústria da música. Afinal, eles oferecem aos criadores de conteúdo uma nova forma de gerar músicas personalizadas e originais para seus vídeos curtos. Assim, eles não precisam de habilidades musicais ou licenças de direitos autorais. Além disso, eles aproximam os fãs de seus artistas preferidos. Já que permitem que eles criem músicas com eles e até mesmo interajam com eles através de feedbacks e sugestões. Decerto, as ferramentas estimulam a criatividade e a inovação, tanto dos criadores de conteúdo quanto dos artistas. Isso também muda a forma como criam, já que elas oferecem novas possibilidades de expressão e experimentação musical.
Sobretudo, as ferramentas representam um momento de integração entre a indústria da música e a tecnologia de IA, levantando questões importantes sobre a identidade artística e o controle dos direitos autorais. As ferramentas também enfrentam limitações e riscos, como a disponibilidade restrita, a qualidade incompleta, a violação de direitos autorais e a perda de originalidade.
Preservando a criatividade
Sobretudo, o Dream Track e o Lyria são ferramentas inovadoras que prometem revolucionar a forma como as pessoas criam e consomem música. A ferramenta usa o modelo de IA Lyria, capaz de gerar músicas de alta qualidade com instrumentais e vocais. Além disso, ela imita o estilo e a voz de artistas famosos.
Ademais, o Dream Track e o Lyria também visam aproximar os fãs de seus artistas preferidos, permitindo que eles criem músicas com eles e até mesmo interajam com eles através de feedbacks e sugestões. A princípio, a DeepMind diz que as tecnologias foram desenvolvidas de forma responsável, garantindo que elas vão impulsionar a criatividade em vez de substituí-la.
