NVIDIA Lyra

Phòng Thí Nghiệm Trí Tuệ Không Gian của NVIDIA tiên phong trong nhận thức 3D, tái tạo và mô hình thế giới sinh tạo. Nhóm công bố tài sản nghiên cứu mở, bộ dữ liệu và kho mã ưu tiên khả năng tái tạo và tiến bộ có thể đo lường. Công trình của họ kết nối đồ họa và thị giác để cung cấp công cụ thực tiễn, sẵn sàng đánh giá cho các nhà khoa học và nhà phát triển.

Dự án Lyra là mã nguồn nghiên cứu mở từ NVIDIA dành cho các mô hình thế giới 3D sinh tạo. Lyra 1.0 giới thiệu tái tạo cảnh 3D và 4D theo hướng tiến feed-forward từ một hình ảnh hoặc video duy nhất thông qua kỹ thuật tự chưng cất khuếch tán video. Lyra 2.0 mở rộng khả năng này thành các thế giới có thể khám phá với sinh tạo dài hạn, nhất quán 3D, cho phép chuyển động camera và di chuyển cảnh mà không cần tối ưu hóa riêng từng cảnh. Kho mã cung cấp các triển khai chính thức cho cả hai phiên bản, giao diện GUI để lấy mẫu và kiểm tra, cùng mã huấn luyện để tái tạo kết quả đã báo cáo hoặc điều chỉnh mô hình cho bộ dữ liệu tùy chỉnh. Mã nguồn được phát hành theo giấy phép Apache-2.0, với giấy phép mô hình được định nghĩa theo từng phiên bản. Các nhà thực hành sử dụng Lyra để tạo các cảnh có thể điều hướng phục vụ tiền trực quan hóa, cơ sở nghiên cứu và khởi tạo bộ dữ liệu. Trọng tâm là sự rõ ràng khoa học: các kịch bản có thể tái tạo, cấu hình được ghi chép và tài sản để đánh giá tính nhất quán 3D và ổn định theo thời gian trên các quỹ đạo. Nó cung cấp một chuẩn mực nhất quán cho các nghiên cứu về sự đồng bộ đa góc nhìn và so sánh có kiểm soát giữa các bộ dữ liệu, chế độ huấn luyện và độ dài quỹ đạo.