NVIDIA Lyra
Lyra es la serie abierta de NVIDIA de modelos generativos de mundos 3D. Convierte imágenes o videos individuales en escenas explorables y consistentes en 3D, y ofrece una interfaz gráfica y código de entrenamiento para investigación reproducible, prototipado rápido y generación controlable de mundos a largo plazo.
Resumen
Clona el repositorio, sigue la configuración del entorno y lanza la interfaz gráfica de Lyra 2.0 para muestrear y navegar por mundos generados. Para ejecuciones programáticas, utiliza los scripts de inferencia proporcionados para reconstruir escenas 3D/4D a partir de imágenes o videos, y luego exporta recursos para evaluación, visualización o pipelines de simulación.
Qué hace
Lyra está dirigido a investigadores en gráficos y visión, equipos de simulación, laboratorios de robótica y artistas técnicos que exploran generación eficiente de escenas 3D. También es ideal para prototipadores de motores y desarrolladores de herramientas de contenido que necesitan escenas navegables para previsualización, estudios de diseño o preparación de datos sintéticos. Debido a que la base de código prioriza la reproducibilidad y evaluación, es una opción adecuada para académicos que evalúan la consistencia a largo plazo y para profesionales que construyen bases internas para síntesis de vistas novedosas e investigación en modelado de mundos.
- Genera mundos 3D explorables con movimiento de cámara y recorrido consistentes en 3D a largo plazo.
- Reconstruye escenas 3D y 4D a partir de una sola imagen o video.
- Usa la interfaz gráfica de Lyra 2.0 para muestrear, navegar, previsualizar y exportar resultados.
- Ejecuta scripts de inferencia feed-forward para generación multivista rápida y procesamiento por lotes.
- Entrena con material personalizado usando instrucciones, configuraciones y pipelines reproducibles.
Capacidades clave
Para quién es
Comienza clonando el repositorio y siguiendo la configuración del entorno en el README. Descarga los puntos de control publicados o entrena los tuyos propios usando las instrucciones y plantillas de configuración proporcionadas. Lanza la interfaz gráfica de Lyra 2.0 para muestrear y navegar mundos de forma interactiva, o ejecuta scripts de inferencia para procesar imágenes y videos por lotes. Exporta resultados para visualización o evaluación, y utiliza el pipeline de entrenamiento para ajustar modelos con material específico. Revisa los archivos de licencia para conocer los términos específicos de cada modelo antes de redistribuir. Consulta la documentación para configuraciones recomendadas y consejos para resolver problemas.
Lyra convierte capturas casuales en mundos explorables manteniendo flujos de trabajo de investigación reproducibles.
Primeros pasos
Lyra destaca por combinar eficiencia feed-forward con generación explorables y consistencia 3D a largo plazo, todo en una base de código diseñada para la reproducibilidad. La combinación de una interfaz gráfica práctica y scripts completos de entrenamiento acelera la experimentación, mientras que las licencias de modelos por versión mantienen claras las reglas de uso. Para equipos que investigan pipelines de modelado de mundos, creación de conjuntos de datos o síntesis de vistas novedosas, Lyra ofrece un referente abierto creíble y un punto de partida práctico.
Abre la herramienta y revisa su experiencia principal.
Crea tu cuenta o accede a tu espacio de trabajo existente.
Usa una tarea propia para evaluar velocidad, calidad y encaje.
Revisa herramientas de IA similares antes de tomar una decisión final.
NVIDIA Lyra
El Laboratorio de Inteligencia Espacial de NVIDIA impulsa el estado del arte en percepción 3D, reconstrucción y modelado generativo de mundos. El equipo publica recursos de investigación abiertos, conjuntos de datos y bases de código que priorizan la reproducibilidad y el progreso medible. Su trabajo une gráficos y visión para ofrecer herramientas prácticas y listas para evaluación a científicos y desarrolladores.
El Proyecto Lyra es una base de código abierta de NVIDIA para modelos generativos de mundos 3D. Lyra 1.0 introdujo la reconstrucción de escenas 3D y 4D en modo feed-forward a partir de una sola imagen o video mediante auto-destilación con difusión de video. Lyra 2.0 amplía esto a mundos explorables con generación consistente en 3D a largo plazo, permitiendo movimiento de cámara y recorrido de escenas sin optimización por escena. El repositorio incluye implementaciones oficiales para ambas versiones, una interfaz gráfica para muestreo e inspección, y código de entrenamiento para reproducir resultados reportados o adaptar modelos a conjuntos de datos personalizados. El código fuente se publica bajo Apache-2.0, con licencias de modelos definidas por versión. Los usuarios emplean Lyra para generar escenas navegables para previsualización, bases de referencia de investigación y creación de conjuntos de datos. El enfoque es la claridad científica: scripts reproducibles, configuración documentada y recursos para evaluar la consistencia 3D y estabilidad temporal a lo largo de trayectorias. Proporciona una base consistente para estudios de coherencia multivista y comparaciones controladas entre conjuntos de datos, regímenes de entrenamiento y duraciones de trayectorias.
Visitar NVIDIA Lyra
Comentarios (0)
No se encontraron comentarios