A ByteDance lançou uma nova geração do modelo de geração de vídeo multimodal Dreamina Seedance 2.0 e anunciou que o modelo foi oficialmente integrado ao seu aplicativo de edição de vídeo CapCut. A OpenAI acaba de anunciar o encerramento do aplicativo Sora, que é visto como uma “redução temporária do poder de fogo” da faixa de geração de vídeo do consumidor. A ByteDance optou por aumentar a sua presença na mesma área, com o intuito de melhorar ainda mais a sua competitividade no mercado global de ferramentas para criadores.
ByteDance afirmou no anúncio que Dreamina Seedance 2.0 pode ajudar os criadores a completar a elaboração, edição e sincronização de conteúdo de vídeo e áudio por meio de prompts de texto, imagens ou vídeos de referência, e pode gerar filmes rapidamente sem operações complicadas. Este modelo pode gerar vídeos sem imagens de referência. Contanto que o criador descreva a cena em poucas palavras, o sistema pode gerar automaticamente a imagem correspondente. As autoridades também enfatizaram que, com o novo modelo, o CapCut pode renderizar materiais, movimentos e efeitos de luz e sombra mais realistas sob vários ângulos de visão e linguagens de lentes, e pode ser usado para editar, aprimorar ou corrigir materiais de propriedade do usuário.
Em termos de cenários de aplicação, Dreamina Seedance 2.0 está posicionado como uma ferramenta auxiliar de geração e criação de vídeo de uso geral, adequada para tutoriais de alimentação, ensinamentos de condicionamento físico, apresentações de negócios ou produtos e conteúdo contendo um grande número de elementos esportivos ou de ação - essas já foram as "dificuldades" dos primeiros modelos de vídeo de IA. Este modelo também é considerado uma ferramenta preliminar de verificação criativa. Os criadores podem gerar rapidamente amostras com base em esboços ou ideias conceituais para testar estilos e storyboards antes de decidir se comprometem-se com a filmagem real. Atualmente, a primeira versão do modelo em CapCut suporta geração de vídeo de até 15 segundos e oferece seis proporções de aspecto para os usuários escolherem.
Este acesso ao CapCut adota uma estratégia de lançamento faseado. Ele será aberto primeiro para usuários no Brasil, Indonésia, Malásia, México, Filipinas, Tailândia e Vietnã, e será gradualmente expandido para mais mercados posteriormente. No mercado chinês, o Dreamina Seedance 2.0 foi integrado ao aplicativo de edição “Jianying” da Bytedance. Relatórios anteriores apontaram que a ByteDance foi criticada por Hollywood e organizações relacionadas devido a disputas de direitos autorais, e uma vez “engavetou” o lançamento global do modelo. O atual mercado de lançamento limitado é considerado um teste cauteloso de conformidade e controle de risco.
Com a ampliação do escopo de acesso, o Dreamina Seedance 2.0 será implementado em múltiplos módulos dentro do CapCut, incluindo funções de edição como "AI Video" e ferramentas de geração como "Video Studio". Também será lançado na plataforma de geração de IA Dreamina da ByteDance e na plataforma de marketing Pippit para conectar cenários de criação e comercialização. A ByteDance afirmou que cooperará com especialistas em áreas relevantes e com a comunidade de criadores para continuar a iterar os recursos do modelo em uso real.
Em termos de segurança e conformidade de conteúdo, a ByteDance estabeleceu múltiplas restrições para o modelo: Primeiro, o modelo proibirá a geração de novos vídeos baseados em fotos ou vídeos contendo rostos reais, com o objetivo de reduzir o risco de falsificação profunda; segundo, o CapCut bloqueará tentativas de gerar imagens ou materiais de propriedade intelectual não autorizados. A empresa destacou ainda que se estes mecanismos de restrição estivessem totalmente maduros, o modelo teria sido aberto no mercado norte-americano, o que também confirma que as regras atuais ainda estão a ser ajustadas e melhoradas.
Para facilitar a identificação externa, o conteúdo gerado pelo Dreamina Seedance 2.0 será incorporado com marcas d'água invisíveis por padrão para marcação e rastreamento quando disseminado fora da plataforma. Espera-se que este mecanismo desempenhe um papel em futuros cenários de disputa de direitos autorais. Por exemplo, quando um detentor de direitos inicia um pedido de remoção ou alega violação de conteúdo gerado, marcas d'água podem ser usadas para ajudar a confirmar se a obra foi gerada por este modelo.