
Penulis|Huang Xiaoyi
WeChat|H997Hbiu
Apabila model video tidak mengalami iterasi versi buat sementara waktu, bagaimana lapisan aplikasi dapat melalui inovasi fungsi membolehkan kemampuan model sedia ada berjalan lebih jauh dalam senario sebenar?
Lihat sahaja Jimeng.
10 Bulan 26 Hari, Jimeng melancarkan fungsi “Studio Drama Pendek”, yang menghubungkan penulisan skrip, penghasilan aset, storyboard, penghasilan video, penyuntingan pasca, dan lain-lain dalam satu projek yang bersatu, memperluaskan skop penciptaan dari sudut dan segmen kepada keseluruhan karya.
Sekilas pandang, konsep ini sebenarnya tidak baru. Penghasilan video memang merupakan proses berbilang langkah, menghubungkan langkah-langkah ini juga merupakan pendekatan biasa bagi banyak agen video.
Tetapi setelah kami menguji, kami mendapati bahawa “penghubungan” berbilang langkah Jimeng bermakna lebih daripada itu:Ia akan mengatur bagaimana model berfungsi untuk pencipta.
Sebagai contoh, dalam ujian sebenar, Agen akan menyusun imej watak pada pelbagai tempoh berdasarkan jalan cerita, kemudian memadankan watak, latar dan kata kunci yang sesuai kepada storyboard tertentu. Bahan apa yang digunakan untuk satu segmen cerita dan bagaimana bahan itu berkhidmat untuk setiap shot boleh diperiksa dan diubah suai.

Dalam proses ini, yang disambungkan bukan sahaja langkah aliran kerja, tetapi juga hubungan yang asalnya perlu disemak berulang kali antara teks skrip, aset imej dan storyboard cerita, khususnya dalam sistem besar di mana model perlu merujuk sesuatu setiap kali ia menjana.
Ini juga sebab mengapa "model video yang lebih kuat menjadikan produk di sekelilingnya lebih penting". Semakin banyak rujukan dan kawalan yang disokong oleh model, semakin produk dapat menghantar bahan dan keperluan yang betul ke setiap penjanaan, semakin besar kemampuan ini dapat dimanfaatkan sepenuhnya.
Yang lebih penting, bidang kod telah lama mengesahkan jalan ini.
Seperti Claude Code yang membolehkan kebolehan Claude masuk ke dalam perpustakaan kod tertentu, membaca kod sedia ada, mengubah fail, menjalankan arahan, dan kemudian menyesuaikan berdasarkan hasil pelaksanaan. Dengan mengatur projek, alat dan maklum balas di sekitar model, penjanaan berulang kali boleh menjadi kerja berterusan yang dipacu, itulah nilai dan perubahan yang boleh dibawa oleh lapisan aplikasi.
Dan sekarang, Ji Meng adalah Seedance dalam penciptaan filem dan televisyen seperti Claude Code.
1
Bermula dengan satu ayat, mencipta keseluruhan projek
Penciptaan filem dan televisyen yang sistematik mempunyai titik permulaan.
Ji Meng Studio Drama Pendek menyediakan tiga titik permulaan penciptaan:Menjana skrip dari satu ayat inspirasi, mengadaptasi novel atau IP menjadi skrip, dan memuat naik skrip sedia ada untuk produksi.

Dalam ujian kami, bermula dari penciptaan skrip yang paling mudah, titik permulaan Ji Meng hanya satu ayat:Watak lelaki dan perempuan melintasi masa ke masa depan, melihat teknologi masa depan dan bencana alam,3 kemudian kembali ke masa lalu selepas bertahun-tahun untuk menyelamatkan masa depan.
Ini adalah cerita yang mudah untuk diteruskan dan juga mudah menjadi rumit apabila difikirkan lebih lanjut.
Bagaimana keadaan watak lelaki dan perempuan apabila mereka tiba di masa depan, dan bagaimana selepas mengalami kehidupan kiamat selama tiga tahun? Apabila kembali ke masa kini, perubahan apa yang harus mereka bawa? Bagaimana hubungan antara bandar yang sama sebelum dan selepas bencana? Semua ini hanya perlu diringkaskan dengan satu ayat 'mereka telah mengalami tiga tahun'; tetapi jika mahu dijadikan video, ia perlu diterjemahkan ke dalam gambar watak, lokasi, dan setiap babak.
Namun, nasib baik ada Agen yang membantu saya menguruskan kesulitan ini.
Selepas memasukkan ayat ini, berdasarkan model yang dibangunkan sendiri DreamScriptAgen drama pendek menggabungkan permintaan dan penawaran pasaran semasa, mencadangkan tiga sudut pandang iaitu aliran plot, aliran emosi, dan aliran peningkatan, dengan jelas memberikan titik jualan dan label untuk kami pilih.

Setelah kami memilih arah, Agen mula menghasilkan skrip, dibahagikan kepada tiga bahagian: tetapan cerita, garis besar episod, dan skrip penuh.
Setiap lapisan mendalam, setiap lapisan membolehkan pengguna membuat pengubahsuaian: jika arah cerita tidak sesuai, tetapan boleh disesuaikan; jika garis besar kurang konflik, boleh menambah peristiwa; jika satu episod terlalu perlahan, boleh mengubah episod itu, dan setiap bahagian boleh berbincang dengan Agen yang memahami trend permintaan dan penawaran pasaran.

Setelah skrip disusun, klik 'Langkah Seterusnya' untuk memasuki bahagian pembinaan perpustakaan aset.

Ini juga merupakan bahagian yang membuat saya rasa obsesif-kompulsif saya sembuh. Dari AI yang dijana 17000 Dalam skrip berbilang perkataan, Agen telah memecahkan 7 watak, dan20 adegan. Seperti yang dapat dilihat dalam gambar di bawah, satu watak mempunyai pelbagai imej, yang dipecahkan berdasarkan perubahan watak yang sama mengikut perkembangan plot, sangat teratur.
Lebih penting lagi, dalam setiap langkah penjanaan aset, Agen telah menulis arahan, selepas pengesahan, ia boleh terus dijana, atau diubah suai secara manual, atau menambah ekspresi watak, pandangan tiga sisi, dan bahan sudut tertentu.
Selepas aset dijana, langkah seterusnya adalah pembuatan storyboard akhir dan video episod.
Dalam langkah ini, Agen akan membuat pemotongan dan penyusunan lebih lanjut berdasarkan aset dan tetapan plot sebelum ini, hampir tidak memerlukan pengguna menulis sendiri.

Kami membenarkan Agen menjana satu kumpulan mengikut tetapan sendiri terlebih dahulu.

Keseluruhan hasilnya juga sangat baik, konsistensi penampilan watak tinggi, dan plot berjalan dengan lancar.
Tetapi apabila diperhatikan dengan teliti, didapati bahawa terdapat kekurangan kesinambungan antara segmen yang berbeza, pemotongan adegan agak mengejutkan; selain itu, terdapat satu bingkai di mana lengan watak utama lelaki tiba-tiba mempunyai parut.
Pada masa ini, anda boleh membuka 'Perbualan dengan AI di sudut kanan bawah' untuk melihat sama ada anda boleh terus memberitahu masalah dan permintaan ini kepada AIuntuk mencari cara menyelaraskan semuanya.
Untuk masalah jurang pada sambungan klip, ia terlebih dahulu menyemak keadaan sebenar dalam projek, kemudian berdasarkan gambar awal dan akhir klip bersebelahan, menghasilkan empat video peralihan masing-masing kira-kira 4 saat dan menyisipkannya pada posisi yang sesuai. Salah satu daripadanya menyambung cahaya putih pada penghujung pembukaan, secara beransur-ansur menampakkan imej seorang remaja berbaring di reruntuhan.

Selepas menambah peralihan ini, kami menonton semula keseluruhan video, dan sambungan antara klip memang menjadi lebih lancar.
Untuk masalah kecederaan pada lengan, kami juga mendapatkan bantuan daripada AITidak perlu tepat pada skala masa, hanya dengan satu arahan lisan yang santai, ia dapat dengan mudah mengenal pasti masalah dan mencadangkan penyelesaian.

Secara keseluruhan, Studio Drama Pendek Imaginasi sedang mengatur setiap proses penjanaan dan pengubahsuaian berdasarkan keseluruhan karya.
Sebelum penjanaan, Agen bertanggungjawab untuk memecahkan tugas, menyusun bahan, dan memajukan penjanaan, manakala pencipta boleh memeriksa hasil dan melaraskan keperluan sepanjang proses. Selepas penjanaan, Agen juga membolehkan pengguna menambah penggambaran, menyisip, dan menyusun semula berdasarkan kandungan sedia ada, kemudian meneruskan kerja.
Automasi mengurangkan kerja persediaan berulang untuk pencipta, manakala fleksibiliti memberi peluang untuk setiap penilaian kreatif baru diterapkan dalam karya.
1
Imaginasi mula mengatur bagaimana model berfungsi
Perubahan yang dibawa oleh “Studio Drama Pendek” boleh difahami melalui satu fakta mudah:Pengguna sedang menghasilkan sebuah karya, dan model menyelesaikan satu bahagian pada satu masa. Nilai produk berlaku di antara kedua-duanya.
Model video boleh menghasilkan imej yang cantik, merujuk kepada watak, dan melaksanakan pergerakan kamera yang kompleks. Tetapi dalam projek sebenar, keupayaan ini perlu mematuhi syarat yang lebih khusus: apa yang baru dialami oleh watak ini, di mana babak ini berlaku dalam cerita, dan bagaimana rakaman ini perlu disambung dengan rakaman sebelumnya.
Maklumat ini, ada yang wujud dalam skrip, ada yang wujud dalam penetapan watak, dan ada juga yang berasal daripada pilihan yang telah dibuat oleh pencipta sebelum ini.
Ia perlu disusun, kemudian dihantar ke dalam proses penjanaan dalam cara yang boleh digunakan oleh model.
Semakin banyak rujukan dan kawalan yang boleh diterima oleh model, semakin jelas nilai kerja ini. Setelah keupayaan profesional dimasukkan ke dalam produk, masih perlu ada orang yang tahu bila untuk menggunakannya, bagaimana untuk menggabungkannya, dan perubahan di satu tempat akan mempengaruhi kandungan lain.
Ini juga adalah logik di sebalik "Seedance semakin kuat, semakin memerlukan satu iMeng".
Dahulu, orang mudah menggunakan Seedance untuk menerangkan nilai iMeng: di sini boleh menggunakan model video yang sangat kuat. Kini, untuk menilai sejauh mana Seedance boleh menyelesaikan penciptaan yang kompleks, juga perlu melihat sejauh mana iMeng boleh mengatur keupayaan ini.
Claude Code dalam bidang kod telah menyediakan satu rujukan yang mudah difahami.
Ia membolehkan model memasuki perpustakaan kod tertentu, membaca projek, mengubah fail, menjalankan arahan, dan meneruskan kerja berdasarkan hasil pelaksanaan. Oleh itu, keupayaan pengaturcaraan model mempunyai persekitaran yang boleh digunakan secara berterusan.
Studio drama pendek iMeng juga membina persekitaran seperti ini dalam penciptaan filem dan televisyen. Skrip, watak, latar, storyboard dan rekod pengubahsuaian tergolong dalam projek yang sama, bukan sahaja menyediakan asas untuk penjanaan kali ini, tetapi juga membolehkan bahan yang dijana digunakan dalam penciptaan seterusnya.
Menurut pembahagian kerja yang diumumkan oleh iMeng,DreamScript bertanggungjawab untuk skrip,DreamShot menggabungkan cerita dan aset untuk mengatur storyboard, Seedance memikul penjanaan video, pencipta boleh memeriksa, melaraskan dan memulihkan semula dalam proses itu.
Keupayaan model, setelah diatur oleh produk, boleh menjadi satu keupayaan yang boleh digunakan berulang kali oleh pencipta.
1
Mengurangkan halangan penciptaan, sambil mengekalkan ruang untuk pengubahsuaian mendalam
Bagi pengguna, kerja yang dilakukan oleh Dream dalam produk ini pertama sekali meningkatkan had bawah persiapan pembuatan.
Pemula mudah menyedari di tengah jalan bahawa watak kekurangan bahan dari sudut tertentu, dan episod berikutnya menggunakan reka bentuk yang bertentangan dengan yang sebelumnya. Agen mengekstrak watak, latar dan hubungan kemunculan terlebih dahulu, kemudian memadankannya dengan storyboard, memberikan tempat untuk memeriksa masalah ini.
Manakala pencipta profesional pula prihatin sama ada automasi akan menjejaskan kawalan dan kebebasan.
Pilihan Dream adalah untuk mengekalkan alat yang boleh digunakan secara mendalam di bawah pintu masuk yang rendah halangan. Kanvas mengatur bahan, papan cerita menyusun plot, skrip, storyboard dan aset boleh terus diubah suai, dan tetapan yang telah disahkan boleh digunakan semula.
Pelancaran studio drama pendek Dream kali ini bukan sahaja menyelaraskan pengurusan versi pasukan, termasuk pengurusan aset berbilang akaun, pengurusan mata ganjaran dan lain-lain, kanvas juga menyokong sehingga seribu bahan tanpa mengurangkan kelancaran pergerakan, zum, pemilihan, batal dan buat semula.
Automasi yang stabil ini membolehkan kerja terus maju, manakala lebih banyak alat profesional membolehkan penciptaan diubah suai dengan lebih mendalam.
Sebagai contoh 3meja pengarah D, pencipta boleh 3meletakkan watak, props dan posisi kamera dalam ruang D, menetapkan laluan pergerakan, kemudian memberikan tangkapan skrin atau rujukan dinamik kepada model, atau mengimport model Blender yang sedia ada.
Jarak antara dua orang, bagaimana kamera bergerak, berapa banyak latar depan menutupi gambar, semuanya boleh dirancang terlebih dahulu. Penjadualan yang kompleks mempunyai asas yang jelas, dan niat penciptaan lebih mudah disampaikan dengan tepat.

Manakala pratonton pintar pula memperluaskan skop pemeriksaan ke seluruh babak: sebelum penghasilan rasmi, seperti pengarah membawa pelakon 'berlatih', storyboard disambungkan dan dipratonton sekali. Pencipta boleh memeriksa rentak keseluruhan, sambungan kamera, tindakan watak dan logik ruang terlebih dahulu, kemudian mengesahkan arah sebelum menghasilkan versi akhir, mengurangkan penarikan kad satu per satu dan kerja semula.
Melalui pratonton pintar, pencipta boleh memeriksa keseluruhan rentak, sambungan rakaman, aksi watak dan logik ruang terlebih dahulu, kemudian mengesahkan arah sebelum menghasilkan rakaman utama, mengurangkan pengambilan kad secara berperingkat dan kerja semula.
Lagipun, kos perlu dikira berdasarkan keseluruhan projek. Rakaman yang gagal, bahan yang disediakan berulang kali, dan kandungan yang terpaksa dibuat semula, semuanya akan dimasukkan ke dalam akaun keseluruhan karya.
Selain mengurangkan penjanaan tidak berkesan dari sisi produk, dari sisi harga, iMeng juga melancarkan aktiviti pemanasan untuk Hari Kesebelas. 10 Bulan 27 Hari, laman rasmi menunjukkan bahawa di bawah syarat keahlian super tahunan berterusan tertentu dan aktiviti, Seedance 2.5 P dengan video rujukan menghasilkan kadar terendah hanya setiap saat 720Ringgit, 0.19 panggilan terendah setiap saatCLI Ringgit. 0.18 .
Dari sudut ini, penggunaan Seedance yang lebih baik mungkin tidak perlu menunggu kemas kini seterusnya.
iMeng yang mengatur penciptaan di sekelilingnya juga boleh memajukan perkara ini.


