NVIDIA Lyra
Lyra é a série aberta da NVIDIA de modelos generativos 3D de mundos. Transforma imagens ou vídeos únicos em cenas exploráveis e consistentes em 3D, oferecendo uma interface gráfica e código de treinamento para pesquisa reproduzível, prototipagem rápida e geração controlável de mundos de longo alcance.
Visão geral
Clone o repositório, siga a configuração do ambiente e inicie a interface gráfica do Lyra 2.0 para amostrar e navegar pelos mundos gerados. Para execuções programáticas, use os scripts de inferência fornecidos para reconstruir cenas 3D/4D a partir de imagens ou vídeos, depois exporte recursos para avaliação, visualização ou pipelines de simulação.
O que faz
O Lyra é ideal para pesquisadores de gráficos e visão computacional, equipes de simulação, laboratórios de robótica e artistas técnicos que exploram geração eficiente de cenas 3D. Também atende prototipadores de motores e desenvolvedores de ferramentas de conteúdo que precisam de cenas navegáveis para pré-visualização, estudos de layout ou preparação de dados sintéticos. Como a base de código prioriza reprodutibilidade e avaliação, é adequada para acadêmicos que avaliam consistência de longo alcance e profissionais que constroem linhas de base internas para síntese de novas vistas e pesquisa em modelagem de mundos.
- Gere mundos 3D exploráveis com movimento de câmera e travessia consistentes em 3D e de longo alcance.
- Reconstrua cenas 3D e 4D a partir de uma única imagem ou vídeo.
- Use a interface gráfica do Lyra 2.0 para amostrar, navegar, pré-visualizar e exportar resultados.
- Execute scripts de inferência em feed-forward para geração rápida multivisão e processamento em lote.
- Treine com filmagens personalizadas usando as instruções, configurações e pipelines reproduzíveis fornecidos.
Principais capacidades
Para quem é
Comece clonando o repositório e seguindo a configuração do ambiente no README. Baixe os checkpoints lançados ou treine o seu próprio usando as instruções e templates de configuração fornecidos. Inicie a interface gráfica do Lyra 2.0 para amostrar e navegar interativamente pelos mundos, ou execute scripts de inferência para processar imagens e vídeos em lotes. Exporte os resultados para visualização ou avaliação e use o pipeline de treinamento para ajustar modelos com filmagens específicas. Revise os arquivos de licença para os termos específicos de cada modelo antes da redistribuição. Consulte a documentação para configurações recomendadas e dicas de solução de problemas.
Lyra transforma capturas casuais em mundos exploráveis, mantendo os fluxos de trabalho de pesquisa reproduzíveis.
Como começar
Lyra se destaca ao combinar eficiência em feed-forward com consistência 3D explorável de longo alcance, tudo em uma base de código projetada para reprodutibilidade. A combinação de uma interface gráfica prática e scripts completos de treinamento acelera a experimentação, enquanto as licenças de modelos por versão mantêm claras as regras de uso. Para equipes que investigam pipelines de modelagem de mundos, inicialização de conjuntos de dados ou síntese de novas vistas, Lyra oferece um benchmark aberto confiável e um ponto de partida prático.
Abra a ferramenta e analise sua experiência principal.
Crie sua conta ou acesse seu workspace existente.
Use uma tarefa própria para avaliar velocidade, qualidade e adequação.
Confira ferramentas de IA semelhantes antes de tomar a decisão final.
NVIDIA Lyra
O Laboratório de Inteligência Espacial da NVIDIA avança o estado da arte em percepção 3D, reconstrução e modelagem generativa de mundos. A equipe publica recursos de pesquisa abertos, conjuntos de dados e bases de código que priorizam reprodutibilidade e progresso mensurável. Seu trabalho conecta gráficos e visão para oferecer ferramentas práticas e prontas para avaliação a cientistas e desenvolvedores.
O Projeto Lyra é uma base de código aberta da NVIDIA para modelos generativos 3D de mundos. O Lyra 1.0 introduziu reconstrução de cenas 3D e 4D em feed-forward a partir de uma única imagem ou vídeo, por meio de auto-destilação com difusão de vídeo. O Lyra 2.0 amplia isso para mundos exploráveis com geração consistente em 3D e de longo alcance, permitindo movimento de câmera e travessia da cena sem otimização por cena. O repositório oferece implementações oficiais para ambas as versões, uma interface gráfica para amostragem e inspeção, e código de treinamento para reproduzir resultados reportados ou adaptar modelos a conjuntos de dados personalizados. O código-fonte é lançado sob Apache-2.0, com licenças de modelos definidas por versão. Profissionais usam o Lyra para gerar cenas navegáveis para pré-visualização, linhas de base de pesquisa e inicialização de conjuntos de dados. O foco é a clareza científica: scripts reproduzíveis, configuração documentada e recursos para avaliar consistência 3D e estabilidade temporal ao longo de trajetórias. Ele fornece uma base consistente para estudos de coerência multivisão e comparações controladas entre conjuntos de dados, regimes de treinamento e durações de trajetórias.
Visitar NVIDIA Lyra
Comentários (0)
Nenhum comentário encontrado