Tin tức và phân tích của tất cả các thiết bị di động

Runway AI Gen-2 biến trình tạo AI chuyển văn bản thành video thành hiện thực

Runway AI Gen có thể làm gì?2 làm cho bạn? Hãy để tôi giải thích; hãy tưởng tượng bạn cần một video có cảnh một người đi bộ xuyên qua bụi rậm trong rừng. Các lựa chọn cho việc này mà bạn nghĩ đến đầu tiên là gì?

MỘT) Đi dạo trong rừng và quay video đó.

B) Tìm và mua một video tương tự như vậy.

C) Sử dụng các công cụ AI tổng hợp để kết hợp các hình ảnh khác cho một video tương tự.

Mặc dù cần chút thời gian và kiến ​​thức kỹ thuật nhưng tất cả các giải pháp trên đều có thể đáp ứng yêu cầu của bạn. Tuy nhiên, điều gì sẽ xảy ra nếu chúng tôi nói với bạn rằng “tùy chọn D” sẽ giúp bạn tiết kiệm tất cả công việc khó khăn này sẽ sớm được thêm vào danh sách? Với thế hệ Runway AI-2, nếu bạn có thể nói điều đó, bạn có thể thấy thời đại bắt đầu. Mô hình mới này sẽ cho phép bạn tạo video chỉ bằng từ ngữ.

Thế hệ AI của Runway là gì?2?

Thế hệ thứ hai của phần mềm AI của Runway, có tên đơn giản là Runway AI Gen-2, là một cải tiến lớn so với thế hệ đầu tiên. Runway AI Gen-2 có thể tạo video đầy đủ chỉ từ mô tả văn bản, trong khi phiên bản cũ hơn chỉ có thể tạo video mới bằng cách sử dụng dữ liệu từ video hiện có. Kể từ tháng 9 năm ngoái, công ty đã nghiên cứu mô hình cải tiến này và giờ đây họ vui mừng tiết lộ rằng đây là mô hình AI chuyển văn bản thành video đầu tiên được cung cấp cho công chúng.

Tạo video không có gì ngoài lời nói. Nếu bạn có thể nói nó, bây giờ bạn có thể nhìn thấy nó.

Giới thiệu, chuyển văn bản thành video. Với Gen-2.

Tìm hiểu thêm tại https://t.co/PsJh664G0Q pic.twitter.com/6qEgcZ9QV4

– Đường băng (@runwayml) Ngày 20 tháng 3 năm 2023

Công ty tuyên bố rằng cách tiếp cận mới của họ cho phép người dùng tổng hợp các video mới một cách thực tế và nhất quán bằng cách sử dụng bố cục và phong cách của hình ảnh hoặc lời nhắc văn bản để áp dụng cho cấu trúc của video nguồn (một tính năng có trong Gen-1) hoặc bằng cách sử dụng chỉ có lời nhắc bằng văn bản.

Gen-1 tập trung vào việc sửa đổi video có sẵn, cho phép người dùng cung cấp clip bị rung trên điện thoại thông minh hoặc hoạt hình 3D thô sơ, sau đó áp dụng lớp phủ do AI tạo. Runway AI Gen-2 là một cải tiến lớn so với Gen-1 vì nó kết hợp những phẩm chất tốt nhất của hai thế hệ, cho phép nó áp dụng bố cục và phong cách của hình ảnh hoặc lời nhắc văn bản vào cấu trúc của video nguồn để tạo ra một video hoàn toàn mới.

Những gì nó đã đạt được thực sự đáng chú ý: giờ đây nó có thể tạo nội dung video hoàn toàn mới chỉ từ mô tả văn bản. Nền tảng dựa trên web có thể tạo ra các video có độ phân giải khá, tuy không mang tính chân thực nhưng vẫn thể hiện được tiềm năng của công nghệ. Các video được thực hiện bởi Gen-2 Runway AI rất nổi bật so với những gì đã có trên thị trường.


Kiểm tra cách sử dụng GPT-4 và tìm hiểu các tính năng mới của ChatGPT


Runway AI Gen-2 đặc trưng

Đối với các tính năng mới, Gen-2 có ba chế độ bổ sung:

  • Cách thức 1 (Chuyển văn bản thành video): Tạo video theo bất kỳ cách nào bạn có thể nghĩ ra từ đầu chỉ bằng lời nhắc văn bản.
  • Cách thức 2 (Văn bản + Hình ảnh thành Video): Tạo video dựa trên hình ảnh lái xe và lời nhắc bằng văn bản.
  • Cách thức 3 – Hình ảnh thành Video: Tạo video chỉ bằng hình ảnh lái xe.

Hơn nữa, các chế độ được giới thiệu trong Runway AI Gen-1 được chuyển sang Runway AI Gen-2chẳng hạn như:

  • Cách thức 4 (Cách điệu): Sử dụng tính thẩm mỹ của bất kỳ hình ảnh hoặc lời nhắc nào để cho biết cách hiển thị video của bạn trong từng khung hình.
  • Cách thức 5 (Bảng phân cảnh): Tạo các kết xuất đã hoàn thiện, tạo kiểu và chuyển động từ các mô hình.
  • Cách thức 6 (Mặt nạ): Đối tượng cách ly.
  • Cách thức 7 (Kết xuất): Tạo kết xuất quang học từ một hình ảnh đầu vào hoặc lời nhắc.
  • Cách thức 8 (Tùy chỉnh): Đặt Gen-1 giúp ích cho bạn bằng cách tinh chỉnh mô hình để có độ chính xác cao hơn.

Dưới đây bạn có thể tìm thấy video Runway AI giải thích Gen-2các tính năng của.

Đường băng Gen-2 dường như quan tâm nhiều hơn đến việc tạo video từ đầu, mặc dù nhiều người đủ tiêu chuẩn phải đưa ra phán quyết này. Khả năng truy cập bị thiếu nghiêm trọng và các video demo mà Runway đã phát hành đều ngắn, run rẩy và hoàn toàn không giống ảnh thực.


Tìm hiểu cách sử dụng Microsoft 365 Copilot và dễ dàng thành thạo Word, Excel, v.v.


Cách sử dụng Runway Gen-2 AI chuyển văn bản thành video?

Những người muốn sản phẩm có thể gặp khó khăn khi có được nó vào lúc này. Runway kinh doanh, nơi phát triển các công cụ chỉnh sửa và phim được hỗ trợ bởi AI, đã công bố danh sách chờ sẵn có của Gen 2 hệ thống AI; các bên quan tâm có thể đăng ký để truy cập vào nó một cách kín Kênh bất hòanhiều người dùng hơn sẽ được thêm vào hàng tuần.

Phần này sẽ được cập nhật khi Runway Gen-2 được phát hành công khai.

Bản phát hành giới hạn của nó là ví dụ được công bố rộng rãi nhất cho đến nay về việc tạo văn bản thành video bên ngoài môi trường được kiểm soát. Công ty con của Alphabet Inc. là Google và công ty Meta Platforms Inc. đều đã trình diễn tính năng chuyển văn bản thành video vào năm ngoái, sử dụng các ví dụ như một chú gấu bông đang rửa bát và một chiếc thuyền buồm trên hồ. Tuy nhiên, cả hai đều không tiết lộ ý định thực hiện công việc này ngoài giai đoạn nghiên cứu.

Đường băng Gen-2 ngày phát hành

Người phát ngôn chính thức của Runway, Kelsey Rondenet, nói với The Verge rằng công ty sẽ “cung cấp quyền truy cập rộng rãi trong những tuần tới”.

Kiểm tra Trang chính thức hoặc đọc giấy để biết thêm thông tin.


Hình ảnh lịch sự: Đường băng

AI 101

Bạn là người mới làm quen với AI? Bạn vẫn có thể lên tàu AI! Chúng tôi đã tạo một bảng chú giải chi tiết về AI cho các thuật ngữ trí tuệ nhân tạo được sử dụng phổ biến nhất và giải thích những kiến ​​thức cơ bản về trí tuệ nhân tạo cũng như những rủi ro và lợi ích của AI. Hãy thoải mái sử dụng chúng. Học cách sử dụng AI là yếu tố thay đổi cuộc chơi!

Các công cụ AI khác mà chúng tôi đã xem xét

Hầu như mỗi ngày, một công cụ, mô hình hoặc tính năng mới xuất hiện và thay đổi cuộc sống của chúng ta, như GPT-4và chúng tôi đã xem xét một số cái tốt nhất:

Bạn có muốn tìm hiểu cách sử dụng ChatGPT hiệu quả? Chúng tôi có một số mẹo và thủ thuật dành cho bạn mà không cần chuyển sang ChatGPT Plus! Kỹ thuật nhắc nhở AI là chìa khóa dẫn đến thế giới vô tận, nhưng bạn nên cẩn thận; Khi muốn sử dụng công cụ AI, bạn có thể gặp các lỗi như “ChatGPT hiện đang hoạt động hết công suất” và “quá nhiều yêu cầu trong 1-giờ thử lại sau”. Vâng, đó thực sự là những lỗi khó chịu, nhưng đừng lo lắng; chúng tôi biết cách khắc phục chúng.

Trong khi vẫn còn một số tranh luận về hình ảnh do trí tuệ nhân tạo tạo ra, mọi người vẫn đang tìm kiếm những công cụ tạo nghệ thuật AI tốt nhất. AI sẽ thay thế các nhà thiết kế? Hãy tiếp tục đọc và tìm hiểu.