Se você não percebeu, uma quantidade crescente de código que está sendo gerado hoje é “observado por IA”. Na verdade, Scott Guthrie, vice-presidente executivo de nuvem e IA da Microsoft, estimou de volta em março que mais de 40% do código que os desenvolvedores estavam enviando para a instrumento de desenvolvedor de IA Copiloto GitHub foi “gerado por IA e não modificado”.
Agora, a tendência está dando origem a startups que prometem evitar que códigos aumentados por IA atrapalhem o trabalho – e os investidores estão prestando atenção.
No início desta semana, uma startup com sede em Israel, Digma, anunciou US$ 6 milhões no financiamento inicial para uma plataforma de feedback contínuo que é executada localmente nas máquinas dos desenvolvedores e os ajuda a estudar seu código – incluindo código generativo criado por IA – para identificar problemas. Ontem, uma plataforma de testes com sede em São Francisco chamada Kolena anunciou seu próprio financiamento – US$ 15 milhões — erigir ferramentas para testar, confrontar e validar o desempenho de modelos de IA.
Hoje, uma startup de quatro pessoas da Bay Area, com meses de existência, chamada Confiança cerebral está tirando as capas ter novidade rodada de financiamento de US$ 3 milhões. De harmonia com o cofundador e CEO Ankur Goyal, o Braintrust é uma vez que um “sistema operacional para engenheiros que criam software de IA”, que os ajuda a evitar resultados ruins de modelos de IA. Os desenvolvedores que criam chatbots de suporte ao cliente, por exemplo, podem usar a tecnologia da Braintrust para prometer que seu chatbot responda às perguntas com precisão, em vez de enlouquecer informações falsas.
Uma vez que muitas startups que prometem a capacidade de erigir software de IA mais confiável, a Braintrust tem apoiadores experientes. O renomado investidor querubim Elad Gil está entre seus investidores e ajudou a incubar o resultado inicial da Braintrust. (Gil sinalizou a rodada para nós, chamando o grupo de seis semanas de “bom”.) Outros de seus investidores notáveis incluem Adam D’Angelo do Quora, Clem Delangue do movimentado grupo de IA HuggingFace e o cofundador da OpenAI Greg Brockman.
Se um sindicato de investimentos impressionante pode ajudar a colocar o Braintrust na frente do grupo é uma questão em ingénuo. Enquanto isso, prometer que o código de IA não interrompa o fluxo de trabalho de uma empresa é um tanto que Goyal diz que praticamente nasceu para resolver.
Fruto de médicos, Goyal cresceu em Pittsburgh e pensou que também seria médico. “Super nerd” quando juvenil, ele diz que uma lição de álgebra linear no ensino médio, onde aprendeu sobre o algoritmo PageRank do Google, mudaria sua vida. (“Fico eriçado só de falar sobre isso”, diz ele.) Ele deixou a biologia, estudou ciência da computação na Carnegie Mellon University e, “de extremo tédio”, abandonou o primeiro ano para erigir um sistema de banco de dados relacional no MemSQL, um dos primeiros ex-alunos do Y Combinator. Mais de cinco anos depois, Goyal cofundou sua própria empresa, a Impira, e quando a Figma adquiriu a empresa no final do ano pretérito, Goyal tornou-se o superintendente de sua plataforma de aprendizagem de máquina.
Foi um bom show. Também deu a Goyal ainda mais informações sobre o crescente repto de erigir produtos de software de subida qualidade nesta novidade era de IA em tudo. No final do verão pretérito, ele saiu para fundar o Braintrust.
“Passei bastante tempo construindo software da velha escola”, diz ele, “e o que é realmente dissemelhante na IA é que ela é inerentemente não determinística, ou seja, se você ortografar código, não poderá realmente prometer que ele funcionará. Você tem que testá-lo em exemplos do mundo real.” O processo é chamado de avaliação ou, coloquialmente, “avaliações” e nem todas as empresas possuem dados de qualidade subida o suficiente para realizar testes suficientes. É por isso que a Braintrust – que ainda não comercializou seu resultado – está trabalhando com empresas que o fazem, incluindo a empresa de automação de fluxo de trabalho Zapier e a empresa de ferramentas de planilhas Coda, que atualmente estão testando a versão beta do que a Braintrust construiu.
“O repto deles”, diz Goyal, “é ‘Tudo muito, na verdade temos toneladas de dados e muitos usuários usando nosso resultado. Mas é realmente difícil para nós reunir isso em um conjunto representativo de exemplos que possamos usar para testar nosso software.’” Com o BrainTrust, ele diz, “Eles podem evacuar quantos dados quiserem em nosso resultado, executar avaliações contra e nós os ajudaremos a selecionar ‘conjuntos de dados de ouro’ que eles podem amontoar ao longo do tempo e usar uma vez que uma medida para saber se seu software está funcionando ou não.”
Uma vez que bônus, diz Goyal, “na verdade, operamos dentro de seus ambientes de nuvem”, o que permite que a Braintrust opere em torno de questões de conformidade espinhosas que, de outra forma, poderiam retardar sua adoção nas empresas.
É simples que ainda é cedo, e a concorrência só se tornará mais acirrada nos próximos meses e anos. Verificações profundasuma startup israelense do qual slogan é “validação contínua para IA”, é mais uma empresa que levantou recentemente financiamento de sementes.
Ainda assim, Goyal descreve o Braintrust exatamente uma vez que o resultado que ele precisava na Figma, e que não existia no mundo até que o Braintrust o criou recentemente. “Há todo um universo em torno da integração contínua que se desenvolveu na última dezena. E isso meio que transformou isso em uma ciência de software de remessa. Mas no mundo da IA, essa metodologia e fluxo de trabalho – até o nosso resultado – simplesmente não existiam.”
Na foto supra, da esquerda para a direita: Coleen Baik (designer fundador), Ankur Goyal (CEO), Manu Goyal (engenheiro fundador) e David Song (gerente de resultado; secção da equipe de Elad Gil).
