Apresentamos o nosso novo modelo de vídeo de fronteira, Runway Gen-4.5. Anteriormente conhecido como Whisper Thunder (também conhecido como) David. O Gen-4.5 é de última geração e estabelece um novo padrão para a qualidade de movimento na geração de vídeo, aderência a prompts e fidelidade visual. Saiba mais abaixo.

Runway Gen-4.5 representa avanços significativos tanto na eficiência dos dados de pré-treinamento quanto nas técnicas de pós-treinamento para modelos de vídeo e serve como nosso novo modelo base para modelagem do mundo. Gen-4.5 obteve 1.247 pontos Elo na tabela de classificação de Texto para Vídeo da Análise Artificial, estabelecendo um novo padrão e superando todos os outros modelos de vídeo de IA no mundo.

Há dois anos, apresentámos o Gen-1, o primeiro modelo de geração de vídeo disponível publicamente. Ele permitiu uma nova forma de expressão criativa e criou uma nova categoria de produto. Nos últimos dois anos, liderámos a indústria ao tornar os modelos de vídeo mais poderosos e controláveis, desde melhorias significativas no modelo base até à habilitação de novos controles e capacidades de edição geral. Hoje, estamos a apresentar o Gen-4.5 — a culminação de um longo esforço de pesquisa para avançar o pré-treinamento e o pós-treinamento de modelos de vídeo.

O modelo destaca-se na compreensão e execução de instruções complexas e sequenciadas. Você pode especificar uma coreografia detalhada da câmera, composições de cena intrincadas, o tempo preciso dos eventos e mudanças atmosféricas sutis, tudo dentro de um único prompt. Continuamos comprometidos em criar ferramentas altamente controláveis e flexíveis que ajudam a dar vida à sua visão exata. Além do Texto para Vídeo, traremos todos os modos de controle existentes (Imagem para Vídeo, Quadros-chave, Vídeo para Vídeo) e mais para o Gen-4.5.

A Gen-4.5 alcança um nível sem precedentes de precisão física e visual. Os objetos movem-se com peso e impulso realistas. As superfícies comportam-se da maneira que o fariam no mundo real. As leis da física podem ser tanto observadas como ignoradas, dependendo da sua visão. Apesar do grande salto nas capacidades, permanecem limitações, como falhas no raciocínio causal e na permanência dos objetos. Acreditamos que esses modos de falha precisam ser abordados para avançar ainda mais na modelagem do mundo, e estamos a trabalhar ativamente para resolvê-los.

O Gen-4.5 foi desenvolvido inteiramente em GPUs NVIDIA durante a pesquisa e desenvolvimento inicial, pré-treinamento, pós-treinamento e inferência. Colaborámos extensivamente com a NVIDIA para ultrapassar os limites do que é possível na otimização de modelos de difusão de vídeo, desde a eficiência do treinamento até à velocidade de inferência. A inferência do modelo é realizada em GPUs das séries NVIDIA Hopper e Blackwell, oferecendo desempenho otimizado sem comprometer a qualidade. Uma abordagem pioneira na indústria que permite ao Gen-4.5 alcançar capacidades sem precedentes.

Estamos a implementar gradualmente o acesso ao Runway Gen-4.5. Estará disponível para todos nos próximos dias. Saiba mais:

O Gen-4.5 foi desenvolvido inteiramente em GPUs @nvidia durante a pesquisa e desenvolvimento inicial, pré-treinamento, pós-treinamento e inferência. Colaborámos extensivamente com a NVIDIA para ultrapassar os limites do que é possível na otimização de modelos de difusão de vídeo, desde a eficiência de treinamento até à velocidade de inferência. A inferência do modelo é realizada em GPUs das séries NVIDIA Hopper e Blackwell, oferecendo desempenho otimizado sem comprometer a qualidade. Uma abordagem pioneira na indústria que permite ao Gen-4.5 alcançar capacidades sem precedentes.

@nvidia Estamos a implementar gradualmente o acesso ao Runway Gen-4.5. Estará disponível para todos nos próximos dias. Saiba mais: