A equipe da MoonValley, uma startup de geração de vídeo de AI de Los Angeles, não acha que você pode levar o caminho a fazer um filme. É por isso que a empresa abriu na terça-feira seu modelo “com reconhecimento 3D” ao público, prometendo uma abordagem “híbrida” que oferece aos cineastas mais controle do que outros modelos padrão de texto para video.
A MoonValley lançou seu modelo, chamado Marey, em beta em março, e agora o lançou como uma assinatura mensal baseada em créditos. Os usuários podem pagar US $ 14,99 por 100 créditos, US $ 34,99 por 250 créditos e US $ 149,99 para 1.000 créditos. O modelo básico também estará disponível em plataformas de terceiros como Fal.ai e Adobe. Os usuários podem gerar clipes de até cinco segundos, o que está de acordo com os padrões do setor para modelos de geração de vídeo disponíveis ao público.
A startup, co-fundada por ex-pesquisadores da DeepMind que trabalharam no modelo de geração de vídeo do Google, afirma que Marey é um dos poucos modelos treinados inteiramente em dados abertamente licenciados. Isso se encaixa perfeitamente nos clientes-alvo da MoonValley: cineastas que desejam evitar futuros processos judiciais sobre conteúdo gerado pela IA que podem se parecer com material protegido por direitos autorais.
Para o cineasta independente Ángel Manuel Soto, o maior ponto de venda de Marey é que ele democratiza o acesso às principais ferramentas de narrativa da IA, especialmente para pessoas que há muito se sentiram excluídas do cinema tradicional. Crescendo em Porto Rico, Soto disse que você precisaria primeiro juntar centenas ou milhares de dólares apenas para alugar câmeras para fazer um filme.
“Em casa, precisávamos pedir permissão para contar nossas histórias”, disse ele. “A IA oferece a capacidade de fazê -lo nos seus próprios termos, sem ter que dizer não aos seus sonhos, porque alguém se recusou a financiá -lo, porque eles não achavam que uma história do seu país poderia devolver um lucro”.
Agora, diz Soto, Marey o ajudou a reduzir os custos de produção de 20% a 40% e trabalhar mais livremente.
Soto trabalhou anteriormente com o estúdio de MoonValley, Asteria, na Docuseries da HBO, “Menudo: Forever Young”. Asteria, também conhecida como XTR, foi adquirida este ano por MoonValley, de acordo com Hemant Taneja, CEO da General Catalyst. (A GC foi um dos principais acionistas da Asteria e investiu mais dinheiro na entidade combinada.)
Marey’s Abordagem ‘Hybrid Filmmaking’
O CEO e co-fundador da MoonValley, Naeem Talukdar, demonstrou que a TechCrunch como Marey poderia ser usada na pré e pós-produção, seja para testar cenas antes de atirar ou ajustar os ângulos da câmera após o fato e como ele pode controlar objetos, personagens, movimento e composição da cena.
Talukdar disse ao TechCrunch que Marey tem um entendimento do mundo físico que poderia se traduzir em uma narrativa mais interativa à medida que a tecnologia se desenvolve. No momento, esse tipo de entendimento-que Marey compartilha com outros modelos como a Sora, ainda privada do Google, e Marey faz coisas como o movimento imitador, enquanto ainda respeita as leis da física.
Por exemplo, um vídeo de um bisonte correndo através das pastagens pode ser traduzido em uma corrida de Cadillac pelo mesmo ambiente, com a grama e a sujeira respondendo ao movimento do carro. Ou Marey pode sobrepor um personagem que se parece com George Washington em um ator, traduzindo tudo, desde os movimentos faciais do ator até os músculos em seus antebraços enquanto ele gesticula.
Talvez mais exclusivo é o apoio de Marey para o movimento gratuito da câmera. Talukdar mostrou como isso permite que você mude a trajetória da câmera com o mouse: ele integrou uma panela e o zoom de deslize a um vídeo de uma mulher em um trem nas Montanhas Rochosas, simplesmente arrastando seu cursor. Ele também observou que Marey poderia atingir o movimento da câmera de quase 360 graus e obedecer às instruções para criar filmagens como se tivesse sido filmada a partir de uma câmera portátil ou boneca.
Marey também pode mudar o pano de fundo dos vídeos, permitindo que os cineastas comecem com as imagens de origem para construir a cena que desejam. Talukdar reproduziu um vídeo de um homem montando uma motocicleta em uma estrada suburbana, que evoluiu para o mesmo homem, sem capacete, andando de bicicleta ligeiramente diferente em uma rodovia country.
O plano de MoonValley nos próximos meses é lançar novos controles, como iluminação, trajetórias de objetos profundos e bibliotecas de personagens, disse Talukdar.
O lançamento público de Marey coloca-o em rivalidade direta com um campo crescente de geradores de vídeo de IA-modelos como a pista Gen-3, Luma Dream MachinePika e Haiper.
Relatórios adicionais de Marina Temkin.
