Adobe lança ActAnywhere, um modelo de vídeo de IA que gera fundos com base no movimento

A Bit Adobe lançou um novo modelo de vídeo, ActAnywhere, que gera fundos de vídeo para o filme e a comunidade VFX com base no movimento e aparência de assuntos em primeiro plano, de acordo com a página HuggingFace.

O modelo ActAnywhere incorpora rapidamente as ideias criativas do usuário em uma cena virtual dinâmica, introduzindo atenção entre quadros para inferência temporal. O conjunto de dados de treinamento do modelo contém 2,4 milhões de vídeos de humanos interagindo com a cena e é treinado de forma autosupervisionada. Os resultados da avaliação mostram que o ActAnywhere é capaz de gerar vídeos altamente realistas de interações em primeiro plano, movimentos de câmera, efeitos de luz e sombra, e pode ser generalizado para amostras distribuídas fora dos dados de treinamento, incluindo indivíduos não humanos.