OpenAI Point-E có thể là sự đổi mới tiếp theo làm rung chuyển ngành công nghiệp AI. Được phát triển và ra mắt bởi OpenAI trong tuần này, Point-E tạo ra các vật thể 3D từ các lệnh văn bản.
Một theo như bài báoPoint-E được cho là có thể tạo mô hình 3D trong vòng một đến hai phút với bộ xử lý NVIDIA V100 duy nhất.
OpenAI Point-E không hiển thị vật thể 3D. Thay vào đó, nó tạo ra các đám mây điểm, là tập hợp các điểm dữ liệu rời rạc trong không gian phản ánh hình dạng 3D.
OpenAI Point-E là gì?
Ngoài mô hình lưới độc lập, Point-E còn bao gồm hai mô hình: mô hình chuyển văn bản thành hình ảnh và mô hình từ hình ảnh sang 3D. DALL-E của OpenAI 2 Mô hình chuyển văn bản thành hình ảnh, tương tự như các công cụ tạo hình ảnh như Khuếch tán ổn định và Khuếch tán ổn định, được phát triển trên các hình ảnh được gắn thẻ để hiểu mối quan hệ giữa các từ và khái niệm hình ảnh. Mặt khác, mô hình chuyển từ hình ảnh sang 3D được cung cấp một loạt hình ảnh được ghép nối với các đối tượng 3D, vì vậy nó đã học cách dịch giữa hai đối tượng một cách hiệu quả.
Khi được đưa ra lời nhắc bằng văn bản, ví dụ: “Một thiết bị có thể in được 3D, 3 Đường kính một bánh răng inch và dày nửa inch” Mô hình chuyển văn bản thành hình ảnh của Point-E tạo ra một đối tượng được kết xuất tổng hợp được đưa vào mô hình chuyển từ hình ảnh sang 3D, tạo ra một đám mây điểm.
Theo các nhà nghiên cứu của OpenAI, Point-E có thể tạo ra các đám mây điểm có màu thường khớp với lời nhắc từ, sau khi phát triển các mô hình trên tập dữ liệu gồm “vài triệu” đối tượng 3D và siêu dữ liệu liên quan. Nó không hoàn hảo; đôi khi, mô hình Point-image-to-3D của E không thể diễn giải hình ảnh từ mô hình chuyển văn bản thành hình ảnh, dẫn đến hình dạng không tương ứng với lời nhắc văn bản. Mặc dù vậy, nhóm OpenAI tuyên bố rằng phương pháp này nhanh hơn nhiều so với công nghệ tiên tiến trước đây.
Mặc dù phương pháp của chúng tôi vượt trội hơn các kỹ thuật tiên tiến trong đánh giá này nhưng nó tạo ra các mẫu trong một khoảng thời gian ngắn.”
“Điều này có thể làm cho nó trở nên thiết thực hơn đối với một số ứng dụng nhất định hoặc cho phép khám phá các vật thể 3D chất lượng cao hơn.”
-Đội OpenAI
OpenAI Point-E có thể là một công cụ mạnh mẽ để thiết kế dự án
Các đám mây điểm do Point-E tạo có thể được sử dụng để tạo các vật thể thực, chẳng hạn như thông qua in 3D. Khi hệ thống được cải tiến thêm một chút, nó có thể được sử dụng trong các quy trình sản xuất trò chơi và hoạt hình với việc bổ sung mô hình chuyển đổi đan.
Mặc dù đây là công cụ mới nhất gia nhập thị trường chế tạo vật thể 3D nhưng chắc chắn đây không phải là công cụ đầu tiên như OpenAI đã nói. Một phiên bản nâng cao hơn của Dream Fields, một công nghệ 3D tổng quát mà Google ra mắt vào năm 2021, đã được ra mắt vào đầu năm nay với tên gọi DreamFusion.
DreamFusion, không giống như Dream Fields, không yêu cầu đào tạo trước. Do đó, nó có thể tạo mô hình 3D của các đối tượng mà không cần dữ liệu 3D. Trong khi các công cụ kết xuất 2D hiện đang được chú ý, thì AI tổng hợp mô hình có tiềm năng trở thành kẻ đột phá công nghiệp lớn tiếp theo. Mô hình 3D thường xuyên được sử dụng trong các lĩnh vực khoa học, thiết kế nội thất, kiến trúc, phim ảnh và truyền hình. Các kỹ sư sử dụng mô hình làm thiết kế cho thiết bị, công cụ và cấu trúc mới, trong khi các công ty kiến trúc sử dụng chúng để minh họa các tòa nhà và cảnh quan được đề xuất.
