Depois que a Apple descontinuou seu aplicativo Music Memos, preposto pelos músicos para o desenvolvimento de ideias musicais, uma novidade startup chamada Fita entrou em cena para preencher o vazio com um aplicativo que utiliza IA para detectar maquinalmente o instrumento e inscrever a gravação. Agora, essa startup está dando o próximo passo em sua jornada para melhorar o processo de gravação de áudio com a introdução de um algoritmo automático de redução de rumor com qualidade de estúdio, também mantido por IA, que funciona em qualquer áudio – não exclusivamente na fala.
O Denoiser AI enviado esta semana uma vez que um aplicativo da web gratuito, com projecto de licenciar a tecnologia para fornecedores no porvir. Mais tarde, ele também será integrado ao aplicativo Tape It, carro-chefe da empresa, afirma a empresa.
Fundada em 2020 por músicos e amigos Thomas Walther e Jan Nash, Fita é o foco inicial estava em um aplicativo de gravação iOS para músicos. Antes de fabricar o Tape It, Walther passou três anos e meio no Spotify depois adquiriu sua startup de detecção de áudio Sonalytic. Nash, por sua vez, é um cantor de ópera com formação clássica, que também é baixista e engenheiro. A dupla foi originalmente inspirada para erigir o Tape It porque era alguma coisa que eles queriam para si mesmos uma vez que companheiros de orquestra, que seria tão simples de usar quanto o Music Memos da Apple, mas que se tornaria mais poderoso com o uso de IA.
A versão original do aplicativo era capaz de detectar maquinalmente o instrumento e, em seguida, inscrever a gravação com uma indicação visual para facilitar a localização dessas gravações procurando o ícone pintado. Os músicos também poderiam juntar seus próprios marcadores aos arquivos, muito uma vez que notas e fotos para revisar mais tarde.
Desde logo, o aplicativo ganhou força com muro de 10.000 usuários ativos mensais, diz a empresa.
Mas uma vez que Walther disse ao TechCrunch na estação da fita é estreia em 2021a equipe pretendia ampliar o uso da IA ao longo do tempo.
Créditos da imagem: Grave
Isso levou ao mais recente desenvolvimento da startup – um denoiser mantido por IA que eles vêm construindo nos últimos dois anos. O repto das gravações, explica a empresa, é o rumor de fundo. Para reduzir o rumor ambiental e a interferência elétrica, os músicos gravam em estúdios e utilizam softwares complexos. A Tape It deseja fornecer uma selecção mais alcançável usando IA. Seu software remove maquinalmente ruídos uma vez que zumbidos e assobios, não exclusivamente palavras faladas, com o objetivo de produzir resultados com qualidade de estúdio em músicas, faixas de um único instrumento e gravações de campo.
“O que desenvolvemos foi uma versão automática do software de eliminação de rumor que você tem encontrado em estúdios de gravação profissionais nos últimos 15 anos”, explica Walther.
Para verificar seus resultados, Tape It é lançando um estudo acadêmico com um teste de audição científica isso mostra a qualidade do software em competir com os denoisers líderes do setor.
Em um vídeo, a empresa explica que, embora os sistemas de aprimoramento de fala tenham avançado significativamente, eles geralmente funcionam exclusivamente para fala e distorcem ou corrompem os sinais musicais. Enquanto isso, os sistemas profissionais de remoção de rumor exigem controle manual de software multíplice por usuários profissionais. A tecnologia Tape It envolve conectar um controlador de rede neural a um algoritmo de redução de rumor fundamentado em processamento de sinal. Isso permitiu a eliminação automática de rumor de sinais de áudio gerais, incluindo música. A empresa planeja apresentar seu trabalho na conferência AES na próxima semana.
“A razão pela qual as pessoas não automatizaram esses [professional systems] é porque tradicionalmente não é verosímil colocá-los em uma rede neural… não é verosímil treinar tal sistema”, observa Walther. “Na verdade, somos os primeiros a treinar tal sistema e é por isso que estamos bastante entusiasmados com esta extensão maior.”
Ele acrescenta que a comunidade acadêmica provavelmente estará menos interessada no resultado de eliminação de rumor em si, mas mais em uma vez que eles conseguiram fazê-lo funcionar dessa maneira, devido às implicações que isso tem para outras aplicações de automação de software de estúdio.
Ainda assim, o software de eliminação de rumor já tem alguns clientes potenciais interessados, incluindo um grande fornecedor de software de estúdio e um grande obreiro de hardware. Nesses casos, serão disponibilizados preços empresariais, mas para startups menores serão oferecidos planos mais baratos.
“Todos estão entusiasmados com o vestuário de a IA ser criativa”, disse Walther, ao anunciar a notícia. “Estamos entusiasmados com a solução de problemas chatos pela IA. Cuidamos do rumor de fundo, para que você possa se concentrar inteiramente nas partes criativas e redigir mais músicas”, disse ele.
As tecnologias de IA não estão sendo usadas exclusivamente para reduzir o rumor de fundo para músicos; é simples, outras empresas também estão recorrendo à IA para fabricar som com qualidade próxima de estúdio para podcasters. Por exemplo, Podcastle lançou este mês seu Magic Dust AIuma utensílio generativa de IA que elimina o rumor de fundo e aprimora sua filete dinâmica.
A equipe de cinco pessoas da Tape It está baseada em Berlim, Londres, Los Angeles e Estocolmo, e inclui designer e músico Cristiano Crusiusanteriormente da consultoria de design Fjord, que foi adquirido pela Accenture. A maior segmento do trabalho no software de remoção de rumor foi feita por Christian Steinmetzpesquisador PhD em IA e áudio.
A empresa continua a crescer, tendo anteriormente recusado ofertas de financiamento.
“Esta é uma pesquisa fundamental e simplesmente não sabíamos quanto tempo levaria”, explicou Walther sobre o motivo pelo qual seguiram esse caminho. “Achamos que seria um pouco perigoso contratar um investidor que não fosse tão paciente. [they’d push you to ] basta pegar um padrão de código acessível e seguir em frente. Mas queríamos ter uma vantagem tecnológica maior”, disse ele.
A empresa está agora a considerar recrutar fundos e está a ter essas discussões, oferecido o ritmo do mercado de IA, mas ainda não tomou qualquer decisão formal.
