Các nhà nghiên cứu đã cải thiện loại mô hình 2D-to-3D này trong một vài năm nay , thêm nhiều chi tiết hơn cho các kết xuất hoàn chỉnh và tăng tốc độ kết xuất
Một công nghệ AI mới nhất của AI cho phép biến một loạt bức ảnh chụp 2D thành cảnh thành một khung cảnh 3D kỹ thuật số trong chớp mắt.
Công cụ này được gọi là Instant NeRF - dựng hình nghịch đảo, một kỹ thuật được phát triển bởi các nhà nghiên cứu từ UC Berkeley, Google Research và UC San Diego vào năm 2020. Tóm lại, phương pháp này lập bản đồ màu sắc và cường độ ánh sáng của các bức ảnh 2D khác nhau, sau đó tạo dữ liệu để kết nối những hình ảnh này từ các điểm thuận lợi khác nhau và hiển thị một cảnh 3D hoàn chỉnh. Ngoài hình ảnh, hệ thống yêu cầu dữ liệu về vị trí của camera.
Các nhà nghiên cứu đã cải thiện loại mô hình 2D-to-3D này trong một vài năm nay , thêm nhiều chi tiết hơn cho các kết xuất hoàn chỉnh và tăng tốc độ kết xuất. Nvidia cho biết mô hình Instant NeRF mới của họ là một trong những mô hình nhanh nhất chưa được phát triển và giảm thời gian hiển thị từ vài phút đến khi quá trình kết thúc “gần như ngay lập tức”.![Nvidia giới thiệu công nghệ AI có thể biến loạt ảnh 2D thành một khung cảnh 3D chỉ với vài giây]( "Nvidia gioi thieu cong nghe AI co the bien loat anh 2D thanh mot khung canh 3D chi voi vai giay")
Khi kỹ thuật này trở nên nhanh hơn và dễ thực hiện hơn, nó có thể được sử dụng cho tất cả các tác vụ.
Isha Salian của Nvidia viết: “Instant NeRF có thể được sử dụng để tạo hình đại diện hoặc cảnh cho thế giới ảo, để chụp những người tham gia hội nghị video và môi trường của họ ở dạng 3D, hoặc để tái tạo cảnh cho bản đồ kỹ thuật số 3D. Công nghệ này có thể được sử dụng để huấn luyện robot và ô tô tự lái hiểu được kích thước và hình dạng của các vật thể trong thế giới thực bằng cách chụp các hình ảnh 2D hoặc đoạn phim về chúng. Nó cũng có thể được sử dụng trong kiến trúc và giải trí để nhanh chóng tạo ra các đại diện kỹ thuật số của môi trường thực mà người sáng tạo có thể sửa đổi và xây dựng trên đó. "
Các nhà nghiên cứu của Nvidia cho biết họ có thể xuất hình ảnh ở độ phân giải 1920 × 1080 chỉ trong vài mili giây. Các nhà nghiên cứu cũng chia sẻ mã nguồn cho dự án, cho phép những người khác thực hiện các phương pháp của họ. Có vẻ như kết xuất NeRF đang tiến triển nhanh chóng và có thể bắt đầu có tác động đến thế giới thực trong những năm tới.