Kling AI: China lança app revolucionário de produção de vídeo por IA

Na última semana, poucos meses após a OpenAI deixar muita gente impressionada como o Sora, o Kling AI foi o assunto do momento. Ele é um modelo chinês de IA (Inteligência Artificial) que cria vídeos através de instruções de texto.

• Sora: confira os vídeos gerados pela nova IA da OpenAI
• Após Sora: vem aí IA do Google que gera games a partir de imagens

A empresa Kuaishou, que desenvolveu o popular aplicativo Kwai, disponibilizou o apenas na China, em uma versão demo com lista de espera. Mesmo assim, o Kling AI viralizou nas redes sociais com posts que mostram uma capacidade similar ao Sora para gerar vídeos.

Aliás, o Kling usa uma tecnologia similar ao Sora, sendo também um modelo de machine learning de difusão que consegue produzir vídeos em alta definição com até dois minutos de duração. O Sora, por outro lado, só consegue gerar vídeos com até um minuto.

Na última quinta-feira (6), a Kuaishou lançou um vídeo que mostra a capacidade do Kling AI, que consegue criar vídeos com fidelidade superior ao Sora em alguns exemplos.

O modelo também conta com uma tecnologia avançada de reconstrução facial e física em 3D, gerando vídeos mais fotorrealistas. Veja:

Essa tecnologia é exclusiva da Kuaishou, a 3D VAE (Autodecodificador Variacional em 3D) consegue criar expressões e movimentos detalhados usando apenas uma imagem de corpo inteiro. A 3D VAE é aprimorada por um mecanismo conjunto de atenção espacial e temporal em 3D que permite que o modelo do Kling AI consiga gerar cenas e movimentos completos, mas respeitando às leis da física. Confira:

A Chinese AI video generator just dropped before we got access to Sora Can generate 2-minute videos at 30fps, 1080p quality, available on the KWAI iOS app with a Chinese phone number A few generations from their site: 1. — Rowan Cheung (@rowancheung)

A Kuaishou não lançou o Kling separadamente, mas incluiu como uma ferramenta na versão exclusiva do app KwaiCut na China. A empresa também não informou se vai expandir o acesso ao Kling para outros países.