O Movie Gen também pode gerar música de fundo e efeitos sonoros sincronizados com o conteúdo do vídeo.
A proprietária do Facebook, Meta, anunciou na sexta-feira que criou um novo modelo de inteligência artificial chamado Movie Gen, que pode criar clipes de vídeo e áudio de aparência realista em resposta à entrada do usuário, dizendo que pode rivalizar com ferramentas líderes de geração de mídia, como OpenAI e ElevenLabs.
Amostras de criações do Movie Gen fornecidas pela Meta mostravam vídeos de animais nadando e surfando, bem como vídeos usando fotografias reais de pessoas para retratá-las realizando ações como pintar em uma tela.
O Movie Gen também pode gerar música de fundo e efeitos sonoros sincronizados com o conteúdo do vídeo, disse Meta em uma postagem no blog, e usar a ferramenta para editar vídeos existentes.
Em um desses vídeos, Meta fez com que a ferramenta inserisse pompons nas mãos de um homem correndo sozinho no deserto, enquanto em outro ele mudou um estacionamento onde um homem andava de skate de um solo seco para outro coberto por uma poça.
Os vídeos criados pelo Movie Gen podem ter até 16 segundos de duração, enquanto o áudio pode ter até 45 segundos, disse Meta. Ele compartilhou dados mostrando testes cegos indicando que o modelo tem desempenho favorável em comparação com ofertas de startups como Runway, OpenAI, ElevenLabs e Kling.
O anúncio ocorre no momento em que Hollywood luta para aproveitar a tecnologia de vídeo de IA generativa este ano, depois que a OpenAI, apoiada pela Microsoft, mostrou pela primeira vez em fevereiro como seu produto Sora poderia criar vídeos semelhantes a filmes em resposta a solicitações de texto.
Os tecnólogos da indústria do entretenimento estão ansiosos por utilizar essas ferramentas para melhorar e acelerar a produção cinematográfica, enquanto outros estão preocupados com a adopção de sistemas que parecem ter sido treinados em obras protegidas por direitos de autor sem permissão.
Os legisladores também destacaram preocupações sobre como os deepfakes, ou deepfakes, gerados por IA estão sendo usados em eleições em todo o mundo, inclusive nos Estados Unidos, Paquistão, Índia e Indonésia.
Porta-vozes da Meta disseram que é improvável que a empresa lance o Movie Gen para uso aberto pelos desenvolvedores, como fez com sua série Llama de modelos Big Language, dizendo que considera os riscos individualmente para cada modelo. Eles se recusaram a comentar especificamente sobre a avaliação da Meta para o Movie Gen.
Em vez disso, disseram eles, a Meta estava trabalhando diretamente com a comunidade de entretenimento e outros criadores de conteúdo nos usos do Movie Gen e iria incorporá-lo aos próprios produtos da Meta no próximo ano.
De acordo com a postagem do blog e um artigo de pesquisa sobre a ferramenta publicado pela Meta, a empresa usou uma combinação de conjuntos de dados licenciados e disponíveis publicamente para construir o Movie Gen.
A OpenAI tem se reunido com executivos e agentes de Hollywood este ano para discutir possíveis parcerias envolvendo Sora, embora ainda não tenha sido relatado que nenhum acordo tenha surgido dessas negociações. As preocupações sobre a abordagem da empresa aumentaram em maio, quando a atriz Scarlett Johansson acusou o criador do ChatGPT de imitar a sua voz sem permissão para o seu chatbot.
A Lions Gate Entertainment, empresa por trás de “Jogos Vorazes” e “Crepúsculo”, anunciou em setembro que daria à startup de IA Runway acesso à sua biblioteca de filmes e TV para treinar um modelo de IA. Em troca, disse ele, o estúdio e seus cineastas podem usar o modelo para melhorar seu trabalho.
(Exceto a manchete, esta história não foi editada pela equipe da NDTV e é publicada por um canal sindicalizado.)
