
Tác giả|Hoàng Tiểu Nghệ
WeChat|H997Hbiu
Khi mô hình video tạm thời không có phiên bản cập nhật, làm thế nào để tầng ứng dụng thông qua đổi mới chức năng giúp khả năng mô hình hiện có phát huy tối đa trong các tình huống thực tế?
Hãy xem Jìmeng để biết câu trả lời.
10 Tháng 26 Ngày, Jìmeng đã ra mắt chức năng “Studio kịch ngắn”, tập trung vào một dự án thống nhất, kết nối các khâu cốt lõi như sáng tác kịch bản, tạo tài sản, phân cảnh, tạo video, chỉnh sửa hậu kỳ, mở rộng phạm vi sáng tạo từ cảnh quay và đoạn phim đến toàn bộ tác phẩm.
Thoạt nhìn, khái niệm này không mới. Sản xuất video vốn là một quá trình nhiều bước, việc kết nối các bước này cũng là ý tưởng chung của nhiều video Agent.
Nhưng qua thử nghiệm thực tế, chúng tôi nhận thấy việc “kết nối” nhiều bước của Jìmeng còn có ý nghĩa hơn nhiều:Nó sẽ sắp xếp cách mô hình hoạt động cho người sáng tạo.
Ví dụ, trong thử nghiệm thực tế, Agent sẽ tổ chức hình ảnh nhân vật ở các giai đoạn khác nhau của cốt truyện, sau đó liên kết các vai diễn, bối cảnh và từ khóa tương ứng với từng phân cảnh cụ thể. Một đoạn cốt truyện sử dụng những tài liệu nào, những tài liệu đó phục vụ cho những cảnh quay nào, đều có mối quan hệ có thể kiểm tra và chỉnh sửa.

Trong quá trình này, không chỉ các bước quy trình được kết nối mà còn là mối quan hệ vốn cần được đối chiếu nhiều lần giữa kịch bản, tài sản hình ảnh và phân cảnh cốt truyện, cụ thể là trong một hệ thống lớn, mỗi lần mô hình tạo ra đều biết phải tham khảo gì.
Đây cũng là lý do “một mô hình video càng mạnh, sản phẩm xoay quanh nó càng quan trọng”. Tham chiếu và kiểm soát mà mô hình hỗ trợ càng phong phú, sản phẩm có thể gửi đúng tài liệu và yêu cầu vào mỗi lần tạo ra đến mức nào, sẽ càng ảnh hưởng đến khả năng cuối cùng của những năng lực này.
Quan trọng hơn, lĩnh vực mã nguồn đã xác nhận con đường này từ lâu.
Giống như Claude Code giúp năng lực của Claude đi vào kho mã cụ thể, đọc mã hiện có, chỉnh sửa tập tin, chạy lệnh, rồi dựa trên kết quả thực thi tiếp tục điều chỉnh. Tổ chức dự án, công cụ và phản hồi xung quanh mô hình, mỗi lần tạo ra có thể tích lũy thành một công việc liên tục tiến triển, đây chính là giá trị và sự thay đổi mà tầng ứng dụng có thể mang lại.
Còn bây giờ, Seedance chính là Claude Code trong sáng tạo phim ảnh của 即梦.
1
Bắt đầu từ một câu nói, tạo ra cả một dự án
Sáng tạo phim ảnh có hệ thống có điểm khởi đầu.
即梦 Studio phim ngắn cung cấp ba điểm khởi đầu sáng tạo:Tạo kịch bản từ một câu cảm hứng, chuyển thể tiểu thuyết hoặc IP thành kịch bản, và trực tiếp tải lên kịch bản có sẵn để sản xuất.

Và thử nghiệm của chúng tôi bắt đầu từ sáng tạo kịch bản với ngưỡng thấp nhất, cho 即梦 điểm khởi đầu chỉ là một câu:Nam nữ chính xuyên không đến tương lai, nhìn thấy công nghệ tương lai và thiên tai,3 năm sau trở về quá khứ, cứu tương lai.
Đây là một câu chuyện rất dễ để tiếp tục suy nghĩ, cũng rất dễ trở nên phức tạp hơn khi suy nghĩ nhiều.
Nam nữ chính khi mới đến tương lai trông như thế nào, trải qua ba năm sống trong thời kỳ tận thế thì ra sao? Trở về hiện tại, họ nên giữ lại những thay đổi gì? Cùng một thành phố trước và sau thảm họa cần có mối quan hệ tương ứng như thế nào? Những điều này viết trong đầu chỉ cần một câu “họ đã trải qua ba năm”; nếu thực sự làm thành video, thì phải cụ thể hóa thành từng hình ảnh nhân vật, từng cảnh quay và từng góc máy.
Nhưng may mắn là có Agent giúp tôi xử lý những phiền toái này.
Sau khi nhập câu này, dựa trên mô hình tự phát triển DreamScriptAgent kịch bản ngắn kết hợp cung cầu thị trường hiện tại, đưa ra ba góc nhìn: dòng kịch bản, dòng cảm xúc, dòng nâng cấp, rõ ràng cung cấp điểm bán và nhãn hiệu để chúng tôi lựa chọn.

Khi chúng tôi chọn được hướng đi, Agent bắt đầu tạo kịch bản, chia thành ba phần: thiết lập câu chuyện, dàn ý từng tập, và toàn bộ kịch bản chính.
Từng bước đi sâu, mỗi bước người dùng đều có thể chỉnh sửa điều chỉnh: nếu hướng câu chuyện không phù hợp, có thể điều chỉnh thiết lập; nếu dàn ý thiếu xung đột, có thể thêm sự kiện; tập nào tiến triển quá chậm, có thể sửa tập đó, và mỗi bước đều có thể trao đổi ý tưởng với một Agent hiểu xu hướng cung cầu thị trường.

Sau khi hoàn thành kịch bản, nhấn “bước tiếp theo” sẽ vào phần xây dựng kho tài sản.

Đây cũng là phần khiến tôi cảm thấy chứng rối loạn ám ảnh cưỡng chế được chữa lành. AI Từ phần tạo ra 17000 Trong kịch bản nhiều chữ, Agent đã phân tách ra 7 nhân vật,20 bối cảnh. Có thể thấy trong hình dưới đây, một nhân vật có nhiều hình ảnh khác nhau, chính là dựa trên sự thay đổi của cùng một nhân vật theo diễn biến câu chuyện để phân tách, rất rõ ràng và có trình tự.
Quan trọng hơn, trong mỗi bước tạo hình ảnh tài sản, Agent đã viết sẵn các từ khóa gợi ý, sau khi xác nhận, có thể tiếp tục tạo, cũng có thể chỉnh sửa thủ công hoặc bổ sung biểu cảm nhân vật, ba góc nhìn, tư liệu góc đặc biệt.
Sau khi tạo xong tài sản, bước tiếp theo là làm phân cảnh cuối cùng và sản xuất video từng tập.
Ở bước này, Agent sẽ dựa trên tài sản và cài đặt kịch bản trước đó, chuẩn bị phân chia và sắp xếp kỹ càng hơn, gần như không cần người dùng tự viết.

Chúng tôi để Agent tạo một loạt theo cài đặt của nó.

Hiệu quả tổng thể cũng rất tốt, ngoại hình nhân vật nhất quán cao, tiến triển câu chuyện cũng rất ổn.
Nhưng khi xem kỹ, sẽ thấy thiếu sự liên kết giữa các đoạn khác nhau, chuyển cảnh hơi đột ngột; thêm vào đó có một khung hình, tay nhân vật nam chính bỗng nhiên có thêm một vết sẹo.
Lúc này, có thể mở phần “Đối thoại với AI ” ở góc dưới bên phải, xem có thể trực tiếp nói những vấn đề và yêu cầu này với AIđể nó tìm cách điều chỉnh thống nhất không.
Đối với vấn đề có khe hở khi ghép các đoạn phim, nó trước tiên đã kiểm tra tình hình thực tế trong dự án, sau đó dựa trên hình ảnh đầu cuối của các đoạn liền kề, tạo ra bốn đoạn video chuyển tiếp mỗi đoạn khoảng 4 giây và chèn vào vị trí tương ứng. Một đoạn trong số đó tiếp nối ánh sáng trắng ở cuối phần mở đầu, dần dần hiện ra hình ảnh cậu bé nằm úp trên đống đổ nát.

Sau khi thêm các đoạn chuyển tiếp này, chúng tôi xem lại toàn bộ phim và thấy sự kết nối giữa các đoạn thực sự mượt mà hơn.
Về vấn đề chấn thương ở cánh tay, chúng tôi cũng đã nhờ đến AI. Không cần chính xác đến mốc thời gian, chỉ cần một câu gợi ý mang tính khẩu ngữ, nó có thể rất hiểu ý tìm ra vấn đề và đề xuất giải pháp.

Nhìn chung, tức là Dream Short Drama Studio đang tổ chức mỗi lần tạo và chỉnh sửa dựa trên toàn bộ tác phẩm.
Trước khi tạo, Agent chịu trách nhiệm phân tích nhiệm vụ, sắp xếp tư liệu, thúc đẩy quá trình tạo, còn người sáng tạo có thể kiểm tra kết quả và điều chỉnh yêu cầu trong quá trình đó. Sau khi tạo xong, Agent cũng cho phép người dùng dựa trên nội dung hiện có để quay bổ sung, chèn thêm và sắp xếp lại, rồi tiếp tục làm tiếp.
Tự động hóa giúp người sáng tạo giảm bớt công việc chuẩn bị lặp đi lặp lại, tính linh hoạt cho phép mỗi quyết định sáng tạo mới đều có cơ hội được thể hiện trong tác phẩm.
1
Dream bắt đầu sắp xếp cách mô hình hoạt động
Sự thay đổi mà “Phòng làm phim ngắn” mang lại có thể hiểu trước hết từ một sự thật rất đơn giản:Người dùng đang làm một tác phẩm, mô hình hoàn thành từng phần trong đó mỗi lần. Giá trị sản phẩm xảy ra giữa hai yếu tố này.
Một mô hình video có thể tạo ra hình ảnh đẹp, có thể tham khảo nhân vật, có thể thực hiện các chuyển động máy phức tạp. Nhưng khi vào dự án thực tế, những khả năng này cần phải tuân theo các điều kiện cụ thể hơn: nhân vật này vừa trải qua điều gì, cảnh này diễn ra ở giai đoạn nào của câu chuyện, cảnh quay hiện tại cần nối tiếp như thế nào với cảnh trước đó.
Những thông tin này, có cái tồn tại trong kịch bản, có cái nằm trong thiết lập nhân vật, và cũng có cái đến từ những lựa chọn mà người sáng tạo đã thực hiện trước đó.
Chúng cần được sắp xếp lại, rồi được đưa vào quá trình tạo ra theo cách mà mô hình có thể sử dụng.
Tham chiếu và kiểm soát mà mô hình có thể tiếp nhận càng phong phú, giá trị của phần công việc này càng rõ ràng. Khi năng lực chuyên môn được đưa vào sản phẩm, vẫn cần có người biết khi nào sử dụng, nên kết hợp thế nào, và việc chỉnh sửa một phần sẽ ảnh hưởng đến những nội dung nào.
Đây cũng là logic đằng sau câu nói “Seedance càng mạnh, càng cần có một iDream”.
Trước đây, người ta dễ dàng dùng Seedance để giải thích giá trị của iDream: ở đây có thể dùng mô hình video rất mạnh. Giờ đây, để đánh giá Seedance có thể hoàn thành sáng tạo phức tạp đến mức nào, cũng cần xem iDream có thể tổ chức những năng lực đó đến mức độ nào.
Claude Code trong lĩnh vực mã nguồn đã cung cấp một tham chiếu dễ hiểu.
Nó cho phép mô hình truy cập vào kho mã cụ thể, đọc dự án, chỉnh sửa tập tin, chạy lệnh, và tiếp tục công việc dựa trên kết quả thực thi. Năng lực lập trình của mô hình vì thế có một môi trường để liên tục phát huy.
Xưởng phim ngắn của iDream cũng đang xây dựng môi trường như vậy trong sáng tạo điện ảnh. Kịch bản, nhân vật, bối cảnh, phân cảnh và ghi chép chỉnh sửa thuộc cùng một dự án, vừa làm cơ sở cho lần tạo ra này, vừa giúp tài liệu tạo ra có thể được sử dụng trong sáng tạo tiếp theo.
Theo phân công công việc mà iDream công bố,DreamScript chịu trách nhiệm kịch bản,DreamShot kết hợp câu chuyện và tổ chức tài sản phân cảnh, Seedance đảm nhận tạo video, người sáng tạo có thể kiểm tra, điều chỉnh và quay lại trong quá trình đó.
Năng lực của các mô hình, sau khi được tổ chức thành sản phẩm, mới trở thành năng lực mà người sáng tạo có thể sử dụng đi sử dụng lại.
1
Giảm rào cản sáng tạo, đồng thời giữ lại không gian cho việc chỉnh sửa sâu sắc
Đối với người dùng, những công việc mà Dream thực hiện trên sản phẩm trước tiên nâng cao mức chuẩn bị tối thiểu cho việc sản xuất.
Người mới dễ nhận ra khi làm đến giữa chừng rằng nhân vật thiếu tư liệu từ một góc độ nào đó, hoặc tập sau sử dụng tạo hình mâu thuẫn với tập trước. Agent sẽ trích xuất trước nhân vật, bối cảnh và mối quan hệ xuất hiện, rồi đối chiếu với phân cảnh, giúp phát hiện những vấn đề này.
Còn các nhà sáng tạo chuyên nghiệp thì quan tâm liệu tự động hóa có ảnh hưởng đến quyền kiểm soát và độ tự do hay không.
Lựa chọn của Dream là giữ lại công cụ có thể đi sâu bên dưới cổng vào với rào cản thấp. Bố cục trên khung vẽ tổ chức tư liệu, bảng phân cảnh sắp xếp cốt truyện, kịch bản, phân cảnh và tài sản đều có thể tiếp tục chỉnh sửa, còn các thiết lập đã xác nhận thì có thể tái sử dụng.
Việc ra mắt xưởng phim ngắn Dream lần này không chỉ đồng bộ với phiên bản nhóm quản lý, bao gồm quản lý tài sản đa tài khoản, quản lý điểm số, mà khung vẽ còn hỗ trợ dù chất liệu chất đống đến hàng nghìn vẫn có thể di chuyển mượt mà, thu phóng trơn tru, chọn vùng nhanh gọn, hoàn tác và làm lại không bị giật lag.
Sự tự động hóa ổn định này giúp công việc có thể tiến triển liên tục, trong khi nhiều công cụ chuyên nghiệp hơn sẽ giúp sáng tạo có thể chỉnh sửa sâu hơn.
Lấy ví dụ 3bàn đạo diễn D, nhà sáng tạo có thể 3bố trí nhân vật, đạo cụ và vị trí máy quay trong không gian D, thiết lập quỹ đạo chuyển động, rồi chụp ảnh hoặc tham khảo động tác để giao cho mô hình, cũng có thể nhập mô hình Blender có sẵn.
Khoảng cách giữa hai người, cách di chuyển máy quay, bao nhiêu phần cảnh trước bị che khuất đều có thể sắp xếp rõ ràng trước. Việc điều phối phức tạp có cơ sở nhìn thấy được, ý định sáng tạo cũng dễ truyền đạt chính xác hơn.

Còn việc diễn thử thông minh thì mở rộng phạm vi kiểm tra đến toàn bộ cảnh: trước khi chính thức tạo ra, giống như đạo diễn dẫn diễn viên "diễn thử", trước tiên kết nối toàn bộ phân cảnh để diễn thử một lần. Nhà sáng tạo có thể kiểm tra trước nhịp độ tổng thể, sự chuyển tiếp cảnh quay, hành động nhân vật và logic không gian, xác nhận hướng đi rồi mới tạo ra bản chính, giảm bớt việc rút thẻ từng cảnh và làm lại.
Thông qua diễn tập thông minh, người sáng tạo có thể kiểm tra trước nhịp điệu tổng thể, sự kết nối giữa các cảnh, hành động của nhân vật và logic không gian, xác nhận hướng đi rồi mới tạo ra bản chính, giảm thiểu việc chọn cảnh từng khung hình và làm lại.
Rốt cuộc, chi phí cũng phải tính cho toàn bộ dự án. Những cảnh quay thất bại, tài liệu chuẩn bị lặp lại, nội dung bị buộc phải làm lại đều sẽ được ghi vào tổng chi phí của tác phẩm.
Ngoài việc giảm tạo ra không hiệu quả ở phía sản phẩm, về phía giá cả, iDream cũng đã ra mắt hoạt động khởi động cho Ngày Độc Thân. 10 Tháng 27 Ngày, trang web chính thức cho thấy, dưới điều kiện thành viên siêu cấp liên tục theo năm và các hoạt động, Seedance 2.5 của 720P với video tham khảo tạo ra được quy đổi thấp nhất chỉ mỗi giây 0.19 đồng,CLI gọi tối thiểu mỗi giây 0.18 đồng.
Nhìn từ góc độ này, lần tới Seedance được sử dụng tốt hơn có thể không cần đợi nó cập nhật.
iDream, tổ chức sáng tạo xoay quanh nó, cũng có thể thúc đẩy việc này.


