Тиймээс танд хүмүүсийн гүйлгэхийг болих зүйл болгох дуу, хүсэл эрмэлзэл байна. Хиймэл оюун ухаанаар хөгжмийн видео хэрхэн хийхийг нь төлөвлөлт, өдөөлт, сайжруулалттай тэнцүү юм. Сайн мэдээ: танд студи эсвэл кино баг хэрэггүй. Илүү сайн мэдээ: та аль хэдийн байгаа хэрэгслүүд болон цөөн хэдэн хиймэл оюун ухааны нэмэлтүүдийн тусламжтайгаар кино урлагийн уур амьсгалыг бий болгож чадна. Шударга анхааруулга: энэ нь лазерыг маллахтай адил хөгжилтэй боловч гэрэл гэгээтэй юм.
Үүний дараа таны унших дуртай нийтлэлүүд:
🔗 Шилдэг хиймэл оюун ухаант дуу бичих хэрэгслүүд: Шилдэг хиймэл оюун ухаант хөгжим болон үгийн генераторууд
Дуу бичих, үгийг хялбархан гаргахад тусалдаг шилдэг хиймэл оюун ухааны хэрэгслүүдийг олж нээгээрэй.
🔗 Хамгийн сайн хиймэл оюун ухаант хөгжмийн үүсгүүр юу вэ? Туршиж үзэх шилдэг хиймэл оюун ухаант хөгжмийн хэрэгслүүд
Мэргэжлийн хөгжмийн замуудыг автоматаар үүсгэдэг тэргүүлэгч хиймэл оюун ухааны платформуудыг судлаарай.
🔗 Текстээс хөгжимд шилжих шилдэг хиймэл оюун ухааны хэрэгслүүд үгсийг аялгуу болгон хувиргадаг
Шинэлэг хиймэл оюун ухааны хэрэгслүүдийг ашиглан бичсэн текстийг илэрхийлэлтэй хөгжим болгон хувиргаарай.
🔗 Хөгжим үйлдвэрлэхэд зориулсан шилдэг хиймэл оюун ухаан холих хэрэгслүүд
Дэвшилтэт хиймэл оюун ухаанаар удирддаг микшер болон мастеринг програм хангамжийн тусламжтайгаар хөгжмийн чанарыг сайжруул.
Хиймэл оюун ухаанаар хийсэн хөгжмийн видеонуудыг юу боломжтой болгодог вэ? ✨
Товч хариулт: уялдаа холбоо. Урт хариулт: таны туршилтуудад тэсвэртэй тодорхой санаа. Шилдэг хиймэл оюун ухааны хөгжмийн видеонууд нь бодит бус байсан ч гэсэн санаатай мэт санагддаг. Та дөрвөн тогтвортой шинж чанарыг анзаарах болно:
-
Шинэ аргаар давтагддаг ганц хүчтэй харааны сэдэв
-
Хэмнэлийг мэдэрсэн засварлалтууд - дууны хэмнэл эсвэл үгийг дагасан тайралт, шилжилт болон камерын хөдөлгөөнүүд
-
Хяналттай санамсаргүй байдал - өөрчлөлтийг өдөөдөг боловч хэв маяг, өнгө, хөдөлгөөний тодорхой палитрын дотор байдаг
-
Ажлын дараах цэвэр байдал - тогтвортой хүрээ, тогтвортой контраст, тод дуу
Хэрэв та энэ гарын авлагаас зөвхөн нэг зүйлийг авбал: нэгийг нь сонгоод дараа нь хатуу дискний овоолго дээр луу шиг хамгаалаарай.
Үр дүнтэй хурдан буудлагын загвар: багууд ихэвчлэн нэг давтагдах сэдвийн дагуу (тууз, гэрэлт цагираг, медуз—хороо сонгоорой) 3-5 секундын турш ~20 удаа бууддаг бөгөөд дараа нь энерги авахын тулд бөмбөр дээр хөндлөн огтлолцдог. Богино буудлага нь урсгалыг хязгаарлаж, эд өлгийн зүйлс нийлэгдэхээс сэргийлдэг.
Хурдан замын зураг: Хиймэл оюун ухаанаар хөгжмийн видео хэрхэн хийх 🗺️
-
Текстээс видео руу шилжих.
Сануулга бичих, клип үүсгэх, тэдгээрийг хооронд нь оёх. Runway Gen-3/4 болон Pika зэрэг хэрэгслүүд богино хэмжээний зураг авалт хийхэд хялбар болгодог. -
Зурагнаас хөдөлгөөн рүү шилжих дараалал.
Товчлуурын зургуудыг бүтээгээд дараа нь Stable Video Diffusion эсвэл AnimateDiff ашиглан хөдөлгөөнийг хэв маягтай болгоно. -
Видео бичлэгээс видео бичлэгийн хэв маяг
Утсан дээрээ барзгар бичлэг хий. Видео бичлэгээс видео бичлэгийн ажлын урсгалаар сонгосон гоо зүйдээ тохируулан дахин загварчил. -
Ярих эсвэл дуулах толгой
Уруулын синхрончлолын гүйцэтгэлийн хувьд аудиогоо Wav2Lip ашиглан нүүрний замтай холбож, дараа нь зэрэглэл тогтоож, нэгтгэнэ үү. Ёс зүйтэй бөгөөд зөвшилцлийн дагуу ашиглана уу [5]. -
Эхлээд хөдөлгөөнт график, дараа нь хиймэл оюун ухаан.
Уламжлалт засварлагч дээр хэвлэмэл болон дүрсүүдийг бүтээгээд дараа нь хэсгүүдийн хооронд хиймэл оюун ухааны хавчааруудыг цацна. Энэ нь амтлагч шиг - хэтрүүлэхэд амархан.
Хэрэгсэл болон эд хөрөнгийн шалгах хуудас 🧰
-
WAV эсвэл өндөр битийн хурдтай MP3 форматаар мастеринг хийсэн дуу
-
Нэг пейжер болон сэтгэл санааны самбарын концепц
-
Хязгаарлагдмал палитр: 2-3 давамгайлсан өнгө, 1 фонтын гэр бүл, хэд хэдэн бүтэцтэй
-
Дууны тодорхой үгтэй холбоотой 6-10 зураг авахыг хүснэ
-
Заавал биш: гар хөдөлгөөн, бүжиг, уруул синк хийх эсвэл хийсвэр B-roll-ын утасны бичлэг
-
Цаг хугацаа. Тийм ч их биш ч сандралгүйгээр давтахад хангалттай
Алхам алхмаар: Хиймэл оюун ухаанаар хөгжмийн видеог эхнээс нь хэрхэн хийх вэ 🧪
1) Урьдчилсан бэлтгэл - надад итгээрэй, энэ нь цаг хэмнэнэ 📝
-
Дууныхаа хэмнэлийг тэмдэглэ. Хэмнэл, найрал дууны оруулга болон бусад том дуунуудыг тэмдэглэ. 4 эсвэл 8 мөр тутамд тэмдэглэгээ тавь.
-
Зураг авалтын жагсаалт. Зураг бүрт нэг мөр бичнэ үү: объект, хөдөлгөөн, линзний мэдрэмж, палитр, үргэлжлэх хугацаа.
-
Библийг хараарай. Таны сэтгэл хөдлөлийг бадраах зургаан зураг. Санал хүсэлтүүд чинь эмх замбараагүй байдалд орохгүйн тулд үүнийг байнга эргэцүүлэн бодоорой.
-
Хууль эрх зүйн эрүүл ахуйн шалгалт. Хэрэв та гуравдагч этгээдийн хөрөнгийг ашиглаж байгаа бол лицензийг баталгаажуулах эсвэл ашиглах эрх олгодог платформуудыг ашиглана уу. YouTube дээрх хөгжмийн хувьд суурилуулсан Аудио сан нь зааврын дагуу ашигласан тохиолдолд зохиогчийн эрхгүй, роялтигүй дуунуудыг санал болгодог [2].
2) Үе - түүхий клипүүдээ аваарай 🎛️
-
Киноны хөдөлгөөнийг хурдан болгохыг хүсвэл текстээс видео эсвэл видеоноос видео болгон хувиргах зориулалттай Runway / Pika
-
Хэрэв та илүү их хяналт, загварлаг үр дүнг авахыг хүсвэл тогтвортой видео диффузийг
-
Одоо байгаа зургийн хэв маягийг хөдөлгөөнт болгож, зургуудын хооронд дүр эсвэл брэндийн тогтвортой байдлыг хадгалахын тулд AnimateDiff ашиглана уу
-
Хэрэв танд нүүрний видео бичлэгээс дуулах жүжигчин хэрэгтэй бол Wav2Lip ашиглан уруул синк хийгээрэй
Мэргэжлийн зөвлөгөө: клип бүрийг богино байлга - 3-5 секунд орчим - дараа нь хурдыг тохируулахын тулд хөндлөн огтлолт хий. Урт хиймэл оюун ухаанаар авсан зургууд нь цаг хугацааны явцад нэг хачин дугуйтай дэлгүүрийн тэрэг шиг дайвалзаж болно.
3) Дараа нь - тайрах, будах, өнгөлөх 🎬
-
Мэргэжлийн NLE дээр засварлаж, өнгө оруулна уу. DaVinci Resolve нь хайчлах, тэгшлэх зориулалттай алдартай бүх талын шийдэл юм.
-
Чичиргээг тогтворжуулж, үхсэн хүрээг тайрч, зөөлөн хальсны үр тариа нэмж, өөр өөр хиймэл оюун ухааны зургуудыг илүү сайн холино.
-
Дуу хоолойгоо голд нь байрлуулж дуугаа холино уу. Тийм ээ, дүрслэл нь гол дүр байсан ч гэсэн.
Хэрэгслийн сетийг товчхон харах 🔧
-
Runway Gen-3/4 - шууд дамжуулж болох, кино мэт хөдөлгөөнтэй, видео бичлэгээс видео бичлэгийн хэв маягийг өөрчилсөн.
-
Пика - хурдан давталтууд, ашиглахад хялбар төлбөртэй.
-
Тогтвортой видео тархалт - тохируулж болох кадрын тоо болон кадрын хурдтай дүрсээс видео руу шилжих.
-
AnimateDiff - Нэмэлт сургалтгүйгээр дуртай хөдөлгөөнгүй загваруудаа хөдөлгөөнтэй болго.
-
Wav2Lip - ярьж буй эсвэл дуулах толгойд зориулсан судалгааны түвшний уруулын синхрончлол [5].
-
DaVinci Resolve - нэгдсэн засварлалт болон өнгө.
Харьцуулах хүснэгт 🧮
Санаатайгаар бага зэрэг замбараагүй. Миний ширээ шиг.
| Багаж хэрэгсэл | Үзэгчид | Үнэтэй | Яагаад ажилладаг вэ |
|---|---|---|---|
| 3-р үеийн нислэгийн зам | Бүтээгчид, агентлагууд | дунд шат | Кинематографик хөдөлгөөн, v2v загварчлал |
| Пика | Ганцаарчилсан уран бүтээлчид | явахдаа төлөх | Хурдан ноорог, хурдан сануулга |
| Тогтвортой видео тархалт | Тинкерерс хөгжүүлэгчид | янз бүр байдаг | Зурагнаас видео руу, fps-г хянах боломжтой |
| AnimateDiff | SD эрчим хүчний хэрэглэгчид | чөлөөт + цаг | Хөдөлгөөнгүй хэв маягийг хөдөлгөөн болгон хувиргадаг |
| Wav2Lip | Жүжигчид, редакторууд | чөлөөт маягийн | Хатуу уруул синхрончлолын судалгааны загвар |
| Да Винчигийн шийдэмгий байдал | Хүн бүр | үнэгүй + студи | Нэг апп дотор өнгө засах, гоё байна |
Лавлагаанд дурдсан албан ёсны хуудсууд юм .
Видео бичлэгт үнэхээр үр дүнтэй гэсэн өдөөлт байна 🧠✍️
Энэ CAMERA-FX суурийг туршиж үзээд зураг тус бүрийг нь өөрчилнө үү:
-
Дүр эсвэл сэдэв: дэлгэцэн дээр хэн эсвэл юу харагдаж байна
-
Үйлдэл : тэд юу хийдэг, үйл үгээр
-
Сэтгэл санааны байдал: сэтгэл хөдлөлийн өнгө аяс эсвэл гэрэлтүүлгийн мэдрэмж
-
Байгаль орчин: газар нутаг, цаг агаар, дэвсгэр
-
Зургийн мэдрэмж: хальсны суурь, линз, үр тариа эсвэл будгийн хэв маяг
-
Өнцөг : ойроос, өргөн, тэрэг, тогоруу, гар
-
F X: бөөмс, гэрэлтэлт, гэрлийн алдагдал
-
X хүчин зүйл: зураг авалт бүрт давтагддаг нэг гайхалтай нарийн ширийн зүйл
Жишээ: неон медузын найрал дуу чимээгүйхэн дуулж, камер орж ирж, манантай шөнө дундын усан онгоцны зогсоол, анаморфик боке, нарийн чимээ, кадр бүрээр нэг л хөх ягаан тууз хөвнө . Бага зэрэг дэггүй, хачин мартагдашгүй.
Уруулын будаг болон робот мэт санагдахгүй гүйцэтгэл 👄
-
Утсан дээрээ лавлах нүүрний мөрийг бичээрэй. Цэвэрхэн, жигд гэрэлтэй.
-
Wav2Lip ашиглан дууныхаа хоолойд амны хэлбэрийг тохируулна уу. Найрал дууныхаа эргэн тойронд богино мөрүүдээр эхэлж, дараа нь өргөжүүлнэ үү. Энэ бол судалгааны код боловч практик хэрэглээнд зориулж баримтжуулсан [5].
-
Үр дүнгээ хиймэл оюун ухааны дэвсгэр дээрээ нэгтгэж, өнгийг нь тохируулаад, дараа нь камерын савлуур шиг бичил хөдөлгөөн нэмснээр наалдамхай мэдрэмж багатай болно.
Ёс зүйн шалгалт: өөрийн дүр төрхийг ашиглах эсвэл тодорхой, бичгээр зөвшөөрөл авах. Гэнэтийн камео бичлэг хийхийг хориглоно.
Чиний хүссэн шиг хөгжим сонсох цаг гаргаж байна 🥁
-
8 баар тутамд тэмдэглэгээ тавь. Эрч хүч авахын тулд найрал дууны өмнөх баар дээр хайчил.
-
Удаан хэсгүүд дээр зургийг удаан байлгаж, хөдөлгөөнийг камерын хөдөлгөөнөөр оруулаарай, хатуу зүсэлт биш.
-
Редактор дээрээ хэд хэдэн кадраар нударч, зураас нь кадрын ирмэгийг цохиж байгаа мэт мэдрэмж төрүүлнэ. Энэ бол мэдрэмж төрүүлэм зүйл, гэхдээ та мэдэх болно.
Хэрэв танд бүрэн цэвэрлэсэн дуунууд эсвэл сүүлийн мөчийн солилцоо хэрэгтэй бол YouTube дээр Studio доторх Аудио сангаас хөгжим солих эсвэл нэмэх боломжтой
Зохиогчийн эрх, платформын нэхэмжлэл, асуудалд орохгүй байх ⚖️
Энэ бол хууль эрх зүйн зөвлөгөө биш боловч практик үндэслэл энд байна:
-
Хүний зохиогчийн эрх чухал. Олон газарт хүний бүтээлч сэтгэлгээ хангалттай байхгүй бол цэвэр машинаар үүсгэгдсэн материал зохиогчийн эрхийн хамгаалалтад хамрагдахгүй байж магадгүй юм. АНУ-ын Зохиогчийн эрхийн газар нь хиймэл оюун ухаанаар үүсгэгдсэн материал агуулсан бүтээлүүдийн талаарх удирдамж болон зохиогчийн эрхийн талаарх сүүлийн үеийн дүн шинжилгээтэй [1].
-
Creative Commons бол таны найз юм. Ямар нэгэн зүйлийг ашиглахаасаа өмнө лицензийн яг нарийн нөхцөлийг шалгаж, холбогдох дүрмийг дагаж мөрдөөрэй [4].
-
YouTube-ийн Content ID нь эрх эзэмшигчдийн мэдээллийн сантай харьцуулан байршуулсан контентыг шалгадаг. Тохирол нь хаалт, мөнгө олох эсвэл хянахад хүргэж болзошгүй бөгөөд YouTube-ийн тусламжид [3] маргааны үйл явцыг баримтжуулсан болно.
-
Vimeo нь таны байршуулсан бүх зүйл, түүний дотор арын хөгжимд хамаарах эрхийг танд олгоно гэж найдаж байна. Лицензийн баримтаа бэлэн байлгаарай.
Эргэлзэж байвал бүтээгчдэд ашиглах эрх олгодог платформуудаас хөгжмөө ашиглаарай эсвэл өөрийн хөгжмөө зохиоорой. Ялангуяа YouTube-ийн хувьд Аудио санг үүнд зориулж бүтээсэн [2].
Өнгөлгөөний аргуудаар үнэтэй харагдуул 💎
-
Дууг зөөлөн намсгаад, дараа нь бага зэрэг хурцална.
-
Хиймэл оюун ухааны гөлгөр байдал нь хуванцар мэт мэдрэгдэхгүйн тулд зөөлөн хальсан ширхэгийн давхаргаар бүтэц нэмнэ
-
Нэг LUT эсвэл видеоны туршид давтагддаг энгийн муруйн тохируулга ашиглан өнгийг нэгтгэ
-
дээд зэрэглэлийн эсвэл интерполяци хийж болно . Зарим хиймэл оюун ухааны генераторууд дунд зэргийн нягтрал эсвэл кадрын тоогоор экспортолдог - засварыг түгжсэний дараа дээд зэрэглэлийн эсвэл кадрын интерполяцийг авч үзье.
-
Хашгирдаггүй гарчгууд. Үг үсгийн хэв маягийг цэвэр байлгаж, зөөлөн сүүдэр нэмж, үгийн хэллэгийн хэмнэлд тохируулна уу. Жижиг зүйлс, том өнгөлгөө.
-
Аудио цавуу. Мастер дээрх жижиг автобусны компрессор болон зөөлөн хязгаарлагч нь оргилуудыг номхон байлгаж чадна. Хэрэв танд таалагдахгүй бол хавтгай болгож болохгүй... заримдаа тийм байдаг.
Хулгайлахад бэлэн гурван жор 🍱
-
Дууны үгээр удирдуулсан коллаж
-
Дууны үгтэй дүрс бүрийн хувьд 3-4 секундын сюрреал виньетка үүсгэнэ үү.
-
Хөвөгч тууз эсвэл оригами шувуу гэх мэт нийтлэг зүйлийг шугам болгон давт.
-
Снэп цохилт болон өшиглөлтийг багасгаад, дараа нь найрал дуунд зөөлөн хөндлөн аялгууг уусгана.
-
-
Зүүдэнд үзүүлсэн гүйцэтгэл
-
Дуулж байгаа царайгаа бичлэгт оруулаарай.
-
Уруулын синкийг түгжихийн тулд Wav2Lip ашиглана уу. Дууны энергитэй хамт хувьсан өөрчлөгддөг хөдөлгөөнт дэвсгэр дээр нийлмэл өнгө оруулна [5].
-
Бүх зүйлийг ижил сүүдэр болон арьсны өнгөөр дүрслэн, уялдаа холбоотой харагдуулна.
-
-
График төрөл + хиймэл оюун ухаан оруулга
-
Редактор дээрээ кинетик үг болон дүрсүүдийг бүтээгээрэй.
-
Өнгөний палитрт тохирох 2 секундын хиймэл оюун ухааны клипүүдийг бичвэрийн хэсгүүдийн хооронд тавь.
-
Нэгдсэн өнгөний дамжуулалт болон гүнийг нэмэгдүүлэхийн тулд жижигхэн виньеткаар дуусга.
-
Зайлшгүй хийх ёстой нийтлэг алдаанууд 🙅
-
Түргэн хэлбэлзэл - хэв маягаа хэт олон удаа өөрчлөх тул юу ч холбоотой мэт санагдахгүй
-
Хэт урт зургууд - Хиймэл оюун ухааны олдворууд цаг хугацааны явцад бий болдог тул хурц тод байлгаарай
-
Аудиог үл тоомсорлож байна - хэрэв засвар нь дуутай адилгүй бол алдаатай мэт санагдаж байна
-
Лицензийн мөрөө хавчих - Content ID анзаарахгүй гэж найдах нь стратеги биш. Энэ нь [3] болно.
Толгой өвдөхөөс сэргийлдэг түгээмэл асуултууд 🍪
-
Шударга хэрэглээний хүрээнд алдартай дууг ашиглаж болох уу? Ховор тохиолдолд. Шударга хэрэглээ нь нарийн бөгөөд нөхцөл байдлаас хамааралтай бөгөөд АНУ-ын хуульд [1] дөрвөн хүчин зүйлийн дагуу тохиолдол бүрээр үнэлэгддэг.
-
Хиймэл оюун ухааны клипүүдийг тэмдэглэх үү? Хэрэв таны аудио эсвэл дүрс бичлэг зохиогчийн эрхээр хамгаалагдсан материалтай тохирч байвал тийм. Лиценз болон эрхийн нотолгоог хадгалаарай. YouTube-ийн баримт бичигт нэхэмжлэл хэрхэн ажилладаг, юу ирүүлэхийг харуулсан болно [3].
-
Би хиймэл оюун ухаанаар үүсгэгдсэн дүрс бичлэгийг эзэмшдэг үү? Энэ нь харьяалал болон таны хүний зохиогчийн эрхийн хэмжээнээс хамаарна. АНУ-ын Зохиогчийн эрхийн албаны хиймэл оюун ухаан болон зохиогчийн эрхийн талаарх хөгжиж буй удирдамжаас эхэлье [1].
TL;DR🏁
хиймэл оюун ухаанаар хөгжмийн видео хэрхэн хийх талаар өөр юу ч санахгүй байгаа бол үүнийг санаарай: харааны хэл сонгож, хэмнэлээ тодорхойлж, богино хэмжээний зорилготой зураг авалт хийж, дараа нь дуу шиг санагдах хүртэл нь будаж, хайчил. Нэхэмжлэл гаргахаас зайлсхийхийн тулд хөгжмийн лиценз болон платформын бодлогын албан ёсны нөөцийг ашиглаарай. Үлдсэн хэсэг нь тоглуулах явдал юм. Үнэнийг хэлэхэд энэ бол хөгжилтэй хэсэг. Хэрэв зураг хачин харагдаж байвал түүнийгээ тэмдэглэ эсвэл хайчил. Хоёулаа хүчинтэй. Та үүнийг яаж гэдгийг нь мэднэ.
Бонус: өнөө орой хийж болох бичил ажлын урсгал ⏱️
-
Найрал дуу сонгоод 3 даалгавар бич.
-
Дуртай генератор дээрээ гурван 4 секундын клип үүсгээрэй.
-
Найрал дууны газрын зургийг хэмнэж, тэмдэглэгээг унага.
-
Гурван хавчаарыг дарааллаар нь хайчилж, зөөлөн ширхэг нэмээд экспортлоорой.
-
Хэрэв танд зохиогчийн эрхээр хамгаалагдсан аудио сонголт эсвэл цэвэрхэн солих хувилбар хэрэгтэй бол YouTube-ийн Аудио санг авч үзээрэй [2].
Та дөнгөж сая туршилтын загвараа илгээлээ. Одоо давталт хийцгээе. 🎬✨
Лавлагаа
[1] АНУ-ын Зохиогчийн эрхийн газар - Зохиогчийн эрх ба хиймэл оюун ухаан, 2-р хэсэг: Зохиогчийн эрхийн боломж (2025 оны 1-р сарын 17) : дэлгэрэнгүй унших
[2] YouTube тусламж - Аудио сангаас хөгжим болон дууны эффект ашиглах : дэлгэрэнгүй унших
[3] YouTube тусламж - Контент ID ашиглах (нэхэмжлэл, мөнгө олох, маргаан): дэлгэрэнгүй унших
[4] Creative Commons - CC лицензийн тухай (тойм, хамаарал, лиценз сонгогч): дэлгэрэнгүй унших
[5] Wav2Lip - GitHub-ийн албан ёсны сан (ACM MM 2020): дэлгэрэнгүй унших