Runway Research - Gen-2: Tạo video độc đáo
Gen-2 là một hệ thống AI đa phương thức mạnh mẽ có khả năng tạo ra các video mới lạ với văn bản, hình ảnh hoặc video clip. Đây là một bước tiến quan trọng trong lĩnh vực tạo nội dung video. Với Gen-2, người dùng có thể tạo ra video theo nhiều cách khác nhau. Ví dụ, trong chế độ Text to Video, người dùng có thể tổng hợp video theo bất kỳ phong cách nào họ có thể tưởng tượng chỉ bằng cách sử dụng một gợi ý văn bản. Nếu bạn có thể nói ra, bây giờ bạn có thể thấy nó. Một ví dụ là gợi ý 'Mặt trời buổi chiều muộn ló dạng qua cửa sổ của một căn hộ ở thành phố New York'.
Trong chế độ Text + Image to Video, người dùng có thể tạo ra một video bằng cách sử dụng một hình ảnh dẫn và một gợi ý văn bản. Ví dụ như 'Một góc chụp thấp của một người đàn ông đi bộ xuống đường, được chiếu sáng bởi đèn neon của các quán bar xung quanh anh ta'.
Chế độ Image to Video cho phép tạo video chỉ sử dụng một hình ảnh dẫn. Chế độ Stylization cho phép chuyển giao phong cách của bất kỳ hình ảnh hoặc gợi ý đến từng khung hình của video. Chế độ Storyboard có thể biến bản nháp thành các bản render đầy đủ phong cách và hoạt hình. Chế độ Mask cũng có thể biến bản nháp thành các bản render đầy đủ phong cách và hoạt hình. Chế độ Render có thể biến các bản render không có kết cấu thành đầu ra thực tế bằng cách áp dụng một hình ảnh đầu vào hoặc gợi ý. Chế độ Customization cho phép khai thác đầy đủ sức mạnh của Gen-1 bằng cách tùy chỉnh mô hình để có kết quả có độ trung thực cao hơn.
Theo các nghiên cứu người dùng, kết quả từ GEN-1 được ưu tiên hơn so với các phương pháp hiện có cho việc dịch ảnh sang ảnh và video sang video. Runway Research cam kết xây dựng các hệ thống AI đa phương thức sẽ cho phép các hình thức sáng tạo mới. Gen-1 đại diện cho một bước quan trọng trong sứ mệnh này.