Hai ngày qua, trailer phim khoa học viễn tưởng Genesis dài chưa đầy một phút gây sốt mạng xã hội.
Có phải nó rất khoa học viễn tưởng? Điều khoa học viễn tưởng hơn nữa là mọi thứ từ tổng hợp hình ảnh và video, âm nhạc cho đến chỉnh sửa đều do AI đảm nhận.
Nhà sản xuất Nicolas Neubert liệt kê các công cụ AI tương ứng, trong đó Midjourney xử lý hình ảnh, Runway xử lý video, Pixabay xử lý nhạc và video clip CapCut.
Midjourney là một vật phẩm vẽ AI quen thuộc và nó đã được cập nhật lên phiên bản 5.2. Runway là một công cụ sản xuất video dựa trên AI và Gen-2 hiện có sẵn để dùng thử miễn phí. Công cụ chỉnh sửa CapCut miễn phí cho mọi người nhưng bạn cũng có thể chọn chỉnh sửa trong Adobe Premier hoặc Final Cut Pro.
Được biết, Neubert đã dành 7 giờ đồng hồ, Midjourney tạo ra 316 prompt, phóng to 128 hình ảnh, Runway tạo ra 310 video và một video có văn bản. Tổng cộng có 44 video được sử dụng trong đoạn giới thiệu.
Hôm nay, Neubert thậm chí đã viết một bài báo dài, mô tả chi tiết quá trình sản xuất Genesis, bao gồm quy trình cụ thể và cách sử dụng các công cụ AI nói trên. Chúng ta hãy xem xét từng cái một.
Về ý tưởng của bộ phim, anh ấy nói rằng ý tưởng về chủ đề loạn lạc đến từ một số bộ phim anh ấy đã xem và anh ấy đã viết một câu chuyện dựa trên chúng.
Bước đầu tiên trong quá trình sản xuất chính thức là xây dựng thế giới và câu chuyện.
Đối với cốt truyện Genesis của trailer, Neubert muốn từng bước xây dựng sự căng thẳng. Do đó, 3 giai đoạn sau đây được xác định:
1. Thiết lập các cảnh
2. Giới thiệu mối đe dọa
3. Kịch tính trong CTA
Cụ thể, Neubert đã làm việc trên bản thảo đầu tiên của bản sao đoạn giới thiệu, bao gồm “Chia sẻ tất cả, Sống theo hậu quả và kêu gọi nhân loại hành động”.
Do đó, sau khi xác định được tông màu tổng thể, anh ấy tiến hành tạo các cảnh xung quanh các chủ đề này. Neubert cuộn qua hàng tấn clip con người và khoa học viễn tưởng về các chủ đề môi trường, công nghệ quân sự và chiến đấu, đồng thời thu thập một câu chuyện từ tất cả chúng.
Ngoài ra, để thêm chiều sâu, anh ấy đã thêm các bức ảnh chụp ba đứa trẻ với những chiếc bùa hộ mệnh phát sáng, gợi ý về một cốt truyện sâu sắc hơn.
Bước thứ hai là tạo ra các hình ảnh liên tiếp trong Midjourney.
Đặc biệt chú ý đến prompt ở đây. Neubert đã tinh chỉnh các tín hiệu ổn định mà anh ấy đã nhận được trong các bài đăng trước để tạo một mẫu để anh ấy có thể sử dụng lại nó cho mọi cảnh quay trong đoạn giới thiệu. Mẫu như sau:
Ngoài ra, tính năng Biến thể mạnh giúp tạo các cảnh khác nhau dễ dàng hơn trong khi vẫn giữ lại bảng màu trước đó. Cảnh của một nữ chiến binh có thể được chuyển đổi thành cảnh của một công dân bình thường, một hacker mạng hoặc một cuộc chiến mà không tạo ra lời nhắc mới.
Bước thứ ba là tạo hình ảnh động trong Runway.
Neubert nhận thấy bước này là dễ nhất. Khi thiết lập, anh ấy luôn cố gắng kích hoạt chế độ Nâng cấp. Tuy nhiên, chế độ này thường gặp vấn đề với khuôn mặt nên đối với ảnh chân dung, anh thường sử dụng chất lượng tiêu chuẩn.
Điều đáng chú ý là thay vì sử dụng kết hợp lời nhắc văn bản và lời nhắc hình ảnh, anh ấy đã kéo và thả một hình ảnh và tạo lại nó cho đến khi nhận được kết quả mà anh ấy hài lòng.
Bước cuối cùng là chỉnh sửa hậu kỳ trong CapCut.
Trong khi Midjourney và Runway tạo ra đầu ra, Neubert bắt đầu bằng cách đặt những cảnh quan trọng mà anh ấy biết sẽ đóng một vai trò quan trọng. Theo như đoạn giới thiệu, anh ấy nghĩ rằng những cảnh quay bên ngoài sẽ là phần mở đầu.
Sau đó bắt đầu lập kế hoạch cho văn bản. Có thể không có clip nào trong dòng thời gian khi văn bản được định vị theo nhạc. Trong vòng chưa đầy một giờ, anh ấy đã biên soạn nội dung theo dòng thời gian và cố định địa điểm. Điều này rất tốt để tạo ra những hình ảnh mà bạn cần thêm một điểm cố định để tính toán những cảnh nào vẫn còn thiếu.
Các bước cụ thể trở nên rất đơn giản, tạo clip → kéo chúng vào CapCut → đặt chúng trên dòng thời gian và từ từ ghép lại câu chuyện. Anh ấy cũng phối màu 2 hoặc 3 gói chỉnh sửa để làm cho chúng trông giống bối cảnh phim hoành tráng hơn.
Kỹ năng duy nhất cần thiết để sử dụng CapCut là đồng bộ hóa các clip theo nhịp độ. Khi "BWAAA" xuất hiện trong âm nhạc, anh ấy luôn cố gắng kết nối hành động trong clip hoặc sắp xếp các clip theo sau. Điều này làm cho toàn bộ chuỗi cảm thấy đắm chìm hơn.
Ngoài ra, Neubert đã xem xét cách kết hợp nhiều chuyển động vào clip. Ở đây anh ấy sử dụng hai thủ thuật để thêm chuyển động.
Thủ thuật đầu tiên: Runway lấy một hình ảnh và tính toán phần nào sẽ được tạo hoạt ảnh dựa trên mô hình. Anh ấy đã thiết kế ngược ý tưởng này, cố gắng xuất ra những hình ảnh trong Midjourney gợi ý chuyển động. Điều này có nghĩa là có thể thêm mờ chuyển động vào cảnh quay hoặc có thể chụp ảnh tĩnh của đầu hoặc người đang chuyển động.
Mẹo thứ hai: Khi bạn phân tích video Runway, bạn sẽ thấy rằng trong clip 4 giây, cảnh thường thay đổi rất nhiều. Vì vậy, trong cảnh trailer, anh ấy chỉ sử dụng đoạn cắt 4 giây đầy đủ hai lần. Tất cả các clip khác dài 0,5-2 giây và tăng tốc clip theo hệ số 1,5-3. Lý do cho điều này là, với tư cách là người xem, bạn chỉ xem một đoạn clip ngắn và do đó cảm nhận được nhiều chuyển động hơn trong cảnh, về cơ bản là tua nhanh phần đó.
Sau một số thao tác, cuối cùng thứ mà chúng tôi giới thiệu với mọi người là đoạn giới thiệu Genesis gây sốc ở phần đầu. Đoạn giới thiệu cũng nhận được nhiều đánh giá tích cực, với một số người nói rằng đây là video thế hệ đường băng hay nhất mà họ từng xem cho đến nay.
Trên thực tế, sau khi Runway Gen-2 được cho dùng thử miễn phí, nhiều cư dân mạng đã nghĩ ra và kết hợp nó với Midjourney để sáng tạo một cách táo bạo.
Runway nắm bắt chi tiết chuyển động của các nhân vật cũng tương đối chính xác. Trong video của cư dân mạng Shencheng, có thể thấy chi tiết về đôi mắt của các nhân vật khiến video sinh động hơn, cũng có thể nói là thêm một chút "kỹ năng diễn xuất".
Sau khi hình ảnh chuyển động, chuyển động của người đàn ông và con ngựa trong đêm rất tự nhiên, có nhiều chỗ hơn cho trí tưởng tượng của các nhân vật và thậm chí cả các hành động tiếp theo.
Sự kết hợp giữa Midjourney và Runway có vẻ bất khả chiến bại, và nó có thể miêu tả đúng ý nghĩa của câu chuyện trong các hành động chính của các nhân vật.
Một số cư dân mạng cũng sử dụng hàng loạt công cụ AI để tạo video clip nhưng có vẻ như kết quả không được như ý muốn.
Người dùng Twitter @nickfloats sử dụng ChatGPT để viết kịch bản, Midjourney để tạo hình ảnh, Runway để tạo video, Triniti để tạo nhạc, AI của Eleven Labs để lồng tiếng và các clip được ghép lại với nhau một cách đơn giản mà không cần điều chỉnh nào khác.
Cư dân mạng đã ghi lại toàn bộ quá trình sản xuất của chính họ và muốn xem sẽ mất bao lâu để sử dụng AI để tạo ra các đoạn quảng cáo ngắn.
Sau 45 phút, tờ rơi ra, nó hoạt động như thế nào?
Cư dân mạng này đã nhận xét kết quả của phim ngắn này là "Quảng cáo dở tệ". Trong quảng cáo này, chuyển động của các nhân vật bị cứng, mối quan hệ logic của hình ảnh không chặt chẽ và khó làm nổi bật chủ đề được thể hiện một cách tổng thể. Sự hợp tác của AI dường như không có gì bất ngờ, mà có nhiều "hú hồn" hơn.
So với Genesis, đoạn phim quảng cáo ngắn này dài bằng một nửa, nhưng lại chiếm rất ít thời gian. Một trong những điểm khác biệt lớn nhất là chi tiết về sự tham gia của con người. Nó thiếu các chủ đề được cân nhắc cẩn thận, các điều chỉnh mạch lạc và sự chú ý đến từng chi tiết.
Nếu chỉ cho phép AI tham gia, hoặc chỉ cho ra đời những tác phẩm dựa trên thế hệ của AI, rõ ràng là không thể tạo ra những kết quả chất lượng cao. Chính ứng dụng và sự điều chỉnh của con người dường như đã tiết lộ giá trị thực sự của những công cụ này.
>> Trí tuệ nhân tạo cứu hài kịch Anh? AI trở thành một ngôi sao trong phim hài và có thể giúp viết truyện cười
Có phải nó rất khoa học viễn tưởng? Điều khoa học viễn tưởng hơn nữa là mọi thứ từ tổng hợp hình ảnh và video, âm nhạc cho đến chỉnh sửa đều do AI đảm nhận.
Nhà sản xuất Nicolas Neubert liệt kê các công cụ AI tương ứng, trong đó Midjourney xử lý hình ảnh, Runway xử lý video, Pixabay xử lý nhạc và video clip CapCut.
Midjourney là một vật phẩm vẽ AI quen thuộc và nó đã được cập nhật lên phiên bản 5.2. Runway là một công cụ sản xuất video dựa trên AI và Gen-2 hiện có sẵn để dùng thử miễn phí. Công cụ chỉnh sửa CapCut miễn phí cho mọi người nhưng bạn cũng có thể chọn chỉnh sửa trong Adobe Premier hoặc Final Cut Pro.
Hôm nay, Neubert thậm chí đã viết một bài báo dài, mô tả chi tiết quá trình sản xuất Genesis, bao gồm quy trình cụ thể và cách sử dụng các công cụ AI nói trên. Chúng ta hãy xem xét từng cái một.
Bước đầu tiên trong quá trình sản xuất chính thức là xây dựng thế giới và câu chuyện.
Đối với cốt truyện Genesis của trailer, Neubert muốn từng bước xây dựng sự căng thẳng. Do đó, 3 giai đoạn sau đây được xác định:
1. Thiết lập các cảnh
2. Giới thiệu mối đe dọa
3. Kịch tính trong CTA
Cụ thể, Neubert đã làm việc trên bản thảo đầu tiên của bản sao đoạn giới thiệu, bao gồm “Chia sẻ tất cả, Sống theo hậu quả và kêu gọi nhân loại hành động”.
Do đó, sau khi xác định được tông màu tổng thể, anh ấy tiến hành tạo các cảnh xung quanh các chủ đề này. Neubert cuộn qua hàng tấn clip con người và khoa học viễn tưởng về các chủ đề môi trường, công nghệ quân sự và chiến đấu, đồng thời thu thập một câu chuyện từ tất cả chúng.
Ngoài ra, để thêm chiều sâu, anh ấy đã thêm các bức ảnh chụp ba đứa trẻ với những chiếc bùa hộ mệnh phát sáng, gợi ý về một cốt truyện sâu sắc hơn.
Đặc biệt chú ý đến prompt ở đây. Neubert đã tinh chỉnh các tín hiệu ổn định mà anh ấy đã nhận được trong các bài đăng trước để tạo một mẫu để anh ấy có thể sử dụng lại nó cho mọi cảnh quay trong đoạn giới thiệu. Mẫu như sau:
Đối với mỗi cảnh, anh ấy sẽ điền vào chỗ trống bằng cảnh mong muốn của mình, đảm bảo rằng các mã thông báo khác duy trì tính liên tục tối đa của chủ đề, màu sắc và ánh sáng.
Ngoài ra, tính năng Biến thể mạnh giúp tạo các cảnh khác nhau dễ dàng hơn trong khi vẫn giữ lại bảng màu trước đó. Cảnh của một nữ chiến binh có thể được chuyển đổi thành cảnh của một công dân bình thường, một hacker mạng hoặc một cuộc chiến mà không tạo ra lời nhắc mới.
Neubert nhận thấy bước này là dễ nhất. Khi thiết lập, anh ấy luôn cố gắng kích hoạt chế độ Nâng cấp. Tuy nhiên, chế độ này thường gặp vấn đề với khuôn mặt nên đối với ảnh chân dung, anh thường sử dụng chất lượng tiêu chuẩn.
Điều đáng chú ý là thay vì sử dụng kết hợp lời nhắc văn bản và lời nhắc hình ảnh, anh ấy đã kéo và thả một hình ảnh và tạo lại nó cho đến khi nhận được kết quả mà anh ấy hài lòng.
Bước cuối cùng là chỉnh sửa hậu kỳ trong CapCut.
Trong khi Midjourney và Runway tạo ra đầu ra, Neubert bắt đầu bằng cách đặt những cảnh quan trọng mà anh ấy biết sẽ đóng một vai trò quan trọng. Theo như đoạn giới thiệu, anh ấy nghĩ rằng những cảnh quay bên ngoài sẽ là phần mở đầu.
Sau đó bắt đầu lập kế hoạch cho văn bản. Có thể không có clip nào trong dòng thời gian khi văn bản được định vị theo nhạc. Trong vòng chưa đầy một giờ, anh ấy đã biên soạn nội dung theo dòng thời gian và cố định địa điểm. Điều này rất tốt để tạo ra những hình ảnh mà bạn cần thêm một điểm cố định để tính toán những cảnh nào vẫn còn thiếu.
Các bước cụ thể trở nên rất đơn giản, tạo clip → kéo chúng vào CapCut → đặt chúng trên dòng thời gian và từ từ ghép lại câu chuyện. Anh ấy cũng phối màu 2 hoặc 3 gói chỉnh sửa để làm cho chúng trông giống bối cảnh phim hoành tráng hơn.
Kỹ năng duy nhất cần thiết để sử dụng CapCut là đồng bộ hóa các clip theo nhịp độ. Khi "BWAAA" xuất hiện trong âm nhạc, anh ấy luôn cố gắng kết nối hành động trong clip hoặc sắp xếp các clip theo sau. Điều này làm cho toàn bộ chuỗi cảm thấy đắm chìm hơn.
Ngoài ra, Neubert đã xem xét cách kết hợp nhiều chuyển động vào clip. Ở đây anh ấy sử dụng hai thủ thuật để thêm chuyển động.
Mẹo thứ hai: Khi bạn phân tích video Runway, bạn sẽ thấy rằng trong clip 4 giây, cảnh thường thay đổi rất nhiều. Vì vậy, trong cảnh trailer, anh ấy chỉ sử dụng đoạn cắt 4 giây đầy đủ hai lần. Tất cả các clip khác dài 0,5-2 giây và tăng tốc clip theo hệ số 1,5-3. Lý do cho điều này là, với tư cách là người xem, bạn chỉ xem một đoạn clip ngắn và do đó cảm nhận được nhiều chuyển động hơn trong cảnh, về cơ bản là tua nhanh phần đó.
Sau một số thao tác, cuối cùng thứ mà chúng tôi giới thiệu với mọi người là đoạn giới thiệu Genesis gây sốc ở phần đầu. Đoạn giới thiệu cũng nhận được nhiều đánh giá tích cực, với một số người nói rằng đây là video thế hệ đường băng hay nhất mà họ từng xem cho đến nay.
Midjourney+Runway: Sự kết hợp kỳ diệu của các công cụ sáng tạo AI
Dưới đây là một số trường hợp sử dụng thế hệ khác để chia sẻ với bạn.Runway nắm bắt chi tiết chuyển động của các nhân vật cũng tương đối chính xác. Trong video của cư dân mạng Shencheng, có thể thấy chi tiết về đôi mắt của các nhân vật khiến video sinh động hơn, cũng có thể nói là thêm một chút "kỹ năng diễn xuất".
Người dùng Twitter @nickfloats sử dụng ChatGPT để viết kịch bản, Midjourney để tạo hình ảnh, Runway để tạo video, Triniti để tạo nhạc, AI của Eleven Labs để lồng tiếng và các clip được ghép lại với nhau một cách đơn giản mà không cần điều chỉnh nào khác.
Cư dân mạng này đã nhận xét kết quả của phim ngắn này là "Quảng cáo dở tệ". Trong quảng cáo này, chuyển động của các nhân vật bị cứng, mối quan hệ logic của hình ảnh không chặt chẽ và khó làm nổi bật chủ đề được thể hiện một cách tổng thể. Sự hợp tác của AI dường như không có gì bất ngờ, mà có nhiều "hú hồn" hơn.
So với Genesis, đoạn phim quảng cáo ngắn này dài bằng một nửa, nhưng lại chiếm rất ít thời gian. Một trong những điểm khác biệt lớn nhất là chi tiết về sự tham gia của con người. Nó thiếu các chủ đề được cân nhắc cẩn thận, các điều chỉnh mạch lạc và sự chú ý đến từng chi tiết.
Nếu chỉ cho phép AI tham gia, hoặc chỉ cho ra đời những tác phẩm dựa trên thế hệ của AI, rõ ràng là không thể tạo ra những kết quả chất lượng cao. Chính ứng dụng và sự điều chỉnh của con người dường như đã tiết lộ giá trị thực sự của những công cụ này.
>> Trí tuệ nhân tạo cứu hài kịch Anh? AI trở thành một ngôi sao trong phim hài và có thể giúp viết truyện cười
