Google lança aplicativo experimental Dreambeans na Índia

O aplicativo de mídia generativa Dreamina, da ByteDance, anunciou em 26 de outubro que seu estúdio dedicado a dramas curtos está operacional. Este estúdio integra três modelos proprietários em um fluxo de trabalho de produção unificado, projetado especificamente para o formato de drama em vídeo vertical.

O primeiro componente é o DreamScript, um modelo de geração de roteiros. Ele é capaz de criar roteiros em vários gêneros dominantes, incluindo narrativas originais, adaptações, versões internacionais e segmentos no estilo comentário. Além disso, o sistema oferece um recurso chamado 'diagnóstico de sucesso', que compara um rascunho com as tendências atuais da plataforma para recomendar melhorias estruturais, e pode processar e analisar textos de até 100.000 caracteres de comprimento.

O segundo modelo, Anycook, funciona como um gerador de imagens adaptado à direção artística de dramas curtos. A Dreamina afirma que o Anycook é calibrado para garantir que os personagens mantenham consistência visual durante toda a produção e para construir cenas em diversos estilos visuais adequados a diferentes ambientes narrativos.

O terceiro modelo, DreamShot, serve como um modelo de storyboard. Ele opera em duas configurações — uma tela livre ou um storyboard estruturado — e suporta modificações globais, o que significa que qualquer ajuste feito através da interação com a ferramenta atualiza todo o quadro em vez de exigir mudanças quadro a quadro. Uma mesa de direção 3D permite aos criadores posicionar uma câmera virtual, definir seu movimento e pré-visualizar a tomada resultante antes da renderização; o sistema também pode vincular tomadas-chave para criar uma sequência animada preliminar para verificar o ritmo e a continuidade.

Uma camada de pós-produção envolve esses três modelos centrais. Tomadas individuais podem ser refeitas no local sem a necessidade de regenerar toda a peça. Uma ferramenta de áudio integrada permite a separação do diálogo do som ambiente, possibilitando que as cenas sejam dubladas. Além disso, uma função de divisão de tomadas divide automaticamente sequências longas em unidades gerenciáveis e editáveis. Os ativos criados em outras partes do Dreamina fluem para o estúdio, e quaisquer edições aplicadas seguem essa cadeia estabelecida.

O recurso mais voltado para distribuição é o modo de remake. Os usuários podem carregar um drama curto existente, e o sistema identificará seus personagens, cenários, adereços e estrutura de tomadas. Em seguida, ele regenera os visuais de acordo com um estilo, proporção de aspecto e região de destino selecionados, preservando todo o tempo e a linguagem de câmera originais. Isso efetivamente cria um pipeline de localização para um formato que os estúdios chineses têm exportado ativamente.

A ByteDance tem buscado este mercado por meio de múltiplas estratégias, desde o desenvolvimento de modelos de vídeo até a oferta de incentivos de plataforma para dramas gerados por IA. A integração dos modelos de roteiro, imagem e storyboard em um único estúdio marca a primeira vez que a empresa fornece toda a cadeia de produção dentro de um único produto.

A ByteDance apresentou seu estúdio de inteligência artificial, Jimeng AI, projetado para a produção de séries dramáticas curtas. Esta plataforma integra todo o ciclo de produção: desde o desenvolvimento do roteiro e a criação de personagens e cenas até o storyboard, filmagem e pós-produção.

O estúdio utiliza três modelos próprios: DreamScript, responsável pela escrita de roteiros; Anycook, usado para geração de imagens; e DreamShot, destinado à criação de storyboards.

A ferramenta DreamScript é capaz de trabalhar tanto com histórias originais quanto com adaptações, além de criar roteiros focados em audiências estrangeiras. Enquanto isso, as ferramentas de imagem e storyboard auxiliam os criadores a formar elementos visuais e planejar os quadros.

Além disso, o estúdio permite substituir quadros individuais, restaurar trilhas sonoras e refazer dramas existentes em um estilo visual adequado para diversos mercados. Assim, o lançamento deste estúdio expande as capacidades do Jimeng para além das simples tarefas de geração de imagens ou vídeos isolados, elevando-as ao nível de produção coordenada de projetos dramáticos curtos.

A Dream Labs arrecadou 90 milhões de dólares em financiamento semente para criar inteligência artificial destinada a ser usada em robôs cotidianos. Esta startup, sediada em São Francisco, foi fundada em 2026 por ex-líderes do grupo de pesquisa GR00T da NVIDIA.

A rodada de financiamento foi liderada pela B Capital e Kindred Ventures. Outros investidores incluíram A. Capital, Unusual Ventures, SV Angel, Wing VC, Scribble VC e Adrian Aoun. A empresa acredita que os robôs frequentemente enfrentam um problema semelhante ao humano: eles são treinados para uma tarefa específica, mas não conseguem aplicar as habilidades adquiridas em outras áreas.

O objetivo da Dream Labs é criar robôs mais flexíveis usando um modelo de IA unificado. Tal sistema permitirá executar novas tarefas ou operar com novo hardware exigindo menor qualificação. O CEO Joel Jang observou que há equipamento suficientemente capaz no setor, mas falta a inteligência que possa funcionar entre diferentes robôs.

Além de levantar fundos, a Dream Labs apresentou o Dream API. Este serviço converte o fluxo de vídeo da câmera do robô e instruções fornecidas em inglês simples em comandos para motores. Os desenvolvedores podem usar este serviço para programar robôs compatíveis sem a necessidade de criar sua própria IA.

Além disso, a empresa lançou o serviço Fine-tuning as a Service. Desenvolvedores e fabricantes de robótica podem carregar dados de demonstração para obter um modelo personalizado para equipamentos não equipados ou para novas funcionalidades. A tecnologia também pode ser testada através do Robot Playground.

Qualquer usuário com navegador pode enviar comandos a um robô físico no escritório da Dream Labs em São Francisco e observar a reação em tempo real. Esses produtos visam tornar a IA robótica mais acessível para desenvolvedores e fabricantes, além de permitir que usuários potenciais testem a tecnologia antes de uma implementação em grande escala.

O modelo principal da empresa, Dream-1, é treinado em gravações de vídeo de pessoas realizando ações comuns. Ele usa informações visuais para prever eventos subsequentes e determinar a ação do robô. O Dream-1 foi projetado para transferir capacidades entre diferentes hardwares.

A empresa afirma que pode controlar robôs compatíveis equipados com garras sem treinamento adicional específico para a tarefa. Atualmente, a Dream Labs colabora com mais de 20 parceiros de hardware. O modelo é capaz de realizar tarefas de mesa, como pegar objetos, colocar itens e dobrar roupas.

Há planos para suportar robôs móveis com rodas e braços robóticos mais ágeis. Daisy Kai, parceira geral da B Capital, afirmou que a redução do custo do equipamento abre oportunidades para o desenvolvimento da inteligência robótica. Ela acredita que o software acessível ajudará os desenvolvedores a criar aplicativos mais úteis em máquinas já existentes.

A Dream Labs planeja direcionar a maior parte do novo capital para o desenvolvimento da infraestrutura computacional. Esses investimentos apoiarão mais usuários e expandirão o espectro de tarefas e tipos de robôs que o Dream-1 pode processar. Embora o potencial seja significativo, a abordagem dos pesquisadores ainda precisa ser testada em condições reais.

Centenas de milhões de robôs industriais operam em todo o mundo, mas a maioria deles é limitada a apenas algumas tarefas em ambientes específicos. Se o modelo funcionar de forma confiável com todas as máquinas, isso pode simplificar a automação da produção e de outros processos para as empresas. Além disso, isso pode reduzir o número de sistemas que as empresas precisam desenvolver para serem compatíveis com diferentes robôs. No entanto, as tecnologias da Dream Labs devem demonstrar sua funcionalidade em condições diversas, bem como com diferentes tipos de equipamentos e aplicações mais complexas.