Web3技術(shù)是音樂(lè)動(dòng)畫(huà)制作中獲得巨大創(chuàng)作潛力的一種全新途徑,。音樂(lè)制作組合ROHKI決定使用該技術(shù)制作屬于他們風(fēng)格的音樂(lè)動(dòng)畫(huà),。分散式互聯(lián)網(wǎng)的想法引起了他們的興趣,這為他們提供了根據(jù)自己的條件創(chuàng)作和分發(fā)音樂(lè)、與新觀眾建立聯(lián)系聯(lián)系以及在更深層次上與粉絲互動(dòng)的可能性,。
ROHKI成立于2021年,自從組合成立以來(lái)他們一直在探索數(shù)字前沿令人興奮的新功能,。ROHKI使用虛幻引擎來(lái)創(chuàng)建他們的音樂(lè)動(dòng)畫(huà)視頻——Animate Music and Lore,。以此來(lái)為觀眾們講述他們虛構(gòu)音樂(lè)世界的背景、歷史和各種細(xì)節(jié)內(nèi)容,。他們的目標(biāo)是帶領(lǐng)觀眾踏上獨(dú)特的音樂(lè)敘事之旅,,探索超越傳統(tǒng)音樂(lè)視頻的長(zhǎng)篇故事。
從使用Houdini開(kāi)始,,ROHKI很快發(fā)現(xiàn)創(chuàng)造引人入勝且真實(shí)的角色是一件非常復(fù)雜的事情,,而且他們的渲染時(shí)間是有限的。因此在這次他們選用了能夠?qū)崟r(shí)渲染且擁有強(qiáng)大圖形功能和易用性的虛幻引擎來(lái)制作他們的音樂(lè)視頻,。
具有強(qiáng)大渲染功能的虛幻引擎5
ROHKI一路學(xué)習(xí),、磨煉他們的技藝,他們發(fā)布的每一個(gè)視頻都體現(xiàn)出他們的進(jìn)步,。但在前兩個(gè)項(xiàng)目的開(kāi)發(fā)過(guò)程中,,他們遇到了一個(gè)新手普遍存在的挑戰(zhàn):在工作中學(xué)習(xí)動(dòng)畫(huà)制作的困難。
使用動(dòng)作捕捉系統(tǒng)提升動(dòng)畫(huà)人物創(chuàng)作能力
對(duì)于新手來(lái)說(shuō)創(chuàng)建逼真的3D角色是最難解決的一個(gè)問(wèn)題,?!坝捎谖覀?nèi)狈χ谱鲃?dòng)畫(huà)的相關(guān)經(jīng)驗(yàn),因此我們最開(kāi)始是從下載預(yù)制動(dòng)畫(huà)開(kāi)始著手視頻制作的,,在動(dòng)畫(huà)制作中我們需要手動(dòng)修復(fù)動(dòng)畫(huà)中的各種細(xì)節(jié),。但我們都知道這對(duì)于創(chuàng)建一部具有開(kāi)創(chuàng)性的長(zhǎng)篇音樂(lè)敘事動(dòng)畫(huà)是一件非常辛苦的事?!?/p>
作為音樂(lè)敘事動(dòng)畫(huà)的基礎(chǔ),,動(dòng)畫(huà)中的核心人物是提升粉絲參與度的關(guān)鍵。ROHKI需要找到新的方法來(lái)讓他們的動(dòng)畫(huà)角色生動(dòng)起來(lái),,因?yàn)檫@將是增強(qiáng)他們的故事敘事性和吸引新觀眾的一個(gè)關(guān)鍵要素,。
ROHKI使用動(dòng)捕技術(shù)創(chuàng)建的音樂(lè)動(dòng)畫(huà)視頻
為了創(chuàng)造一場(chǎng)真正的身臨其境的體驗(yàn),,ROHKI需要一種工具來(lái)幫助他們減少對(duì)動(dòng)畫(huà)創(chuàng)建過(guò)程的過(guò)分關(guān)注,從而專(zhuān)注于動(dòng)畫(huà)的重點(diǎn)元素——音樂(lè),。在最新發(fā)布的音樂(lè)視頻中《Stars Won’t Align》ROHKI使用了Movella的Xsens動(dòng)作捕捉技術(shù)以提升他們的工作流程并解決手動(dòng)創(chuàng)建角色定制化動(dòng)作的難題,。ROHKI希望花更少的時(shí)間編輯預(yù)制動(dòng)畫(huà)資產(chǎn),從而將節(jié)省下來(lái)的時(shí)間投入到創(chuàng)建更豐富的環(huán)境中,。
Xsens是一種能夠記錄人體運(yùn)動(dòng)數(shù)據(jù)的動(dòng)作捕捉系統(tǒng),,可用于創(chuàng)建更逼真的角色模型定制動(dòng)作。通過(guò)將手機(jī)與Xsens Live?link結(jié)合使用,,ROHKI可以實(shí)時(shí)跟蹤自己的面部動(dòng)作,。這項(xiàng)技術(shù)的應(yīng)用讓他們的角色更加生動(dòng),為觀眾帶來(lái)了更加真實(shí)和身臨其境的表演效果?,F(xiàn)在他們不再依賴(lài)預(yù)制的資產(chǎn)動(dòng)畫(huà),,而是能夠馬上開(kāi)始“扮演”他們的角色?!?a class="insidelink" href="http://shcjtec.com/Shop/mc/Suits/XsensMoven/" target="_blank" title="Xsens動(dòng)作捕捉系統(tǒng)">Xsens讓我們可以完全變成我們的角色,,這感覺(jué)真的很棒!”ROHKI解釋道,。
“Xsens動(dòng)作捕捉套裝具有可實(shí)時(shí)傳輸?shù)闹庇^性,,因此我們很快就掌握了如何創(chuàng)作更有吸引力的音樂(lè)動(dòng)畫(huà)視頻,”他們繼續(xù)說(shuō)道,。ROHKI以前非常依賴(lài)對(duì)動(dòng)畫(huà)有更多了解的朋友,,而現(xiàn)在他可以更加自信的獨(dú)立創(chuàng)作屬于他們自己的音樂(lè)視頻?!拔覀冎恍璐┥蟿?dòng)捕服,,打開(kāi)軟件,校準(zhǔn),、記錄并將數(shù)據(jù)實(shí)時(shí)傳輸?shù)教摶靡嬷芯涂梢蚤_(kāi)始動(dòng)畫(huà)制作了,,這種便捷性真的超乎我們的想象!”
動(dòng)作捕捉與人工智能相結(jié)合
動(dòng)作捕捉技術(shù)的應(yīng)用讓他們?cè)诠ぷ鞯母鱾€(gè)方面都有了更深層次的自主權(quán),。ROHKI不再依賴(lài)他人的知識(shí)或模糊的想法表達(dá)來(lái)制作動(dòng)畫(huà)的鏡頭,現(xiàn)在他們就是音樂(lè)家,、藝術(shù)總監(jiān),、mocap演員、攝像師,、VFX藝術(shù)家——Xsens幫助他們實(shí)現(xiàn)了創(chuàng)作自由,。
在他們探索音樂(lè)故事的過(guò)程中也用到了人工智能軟件——Warp Fusion,這是一種幫助他們探索不同藝術(shù)風(fēng)格的全新工具,?!白畛?,我們利用Midjourney中的新鮮元素來(lái)為我們的內(nèi)容進(jìn)行潤(rùn)色,”ROHKI說(shuō)道,?!暗覀冎烙幸环N方法可以幫助我們?cè)诟畹膶哟紊先谌肴斯ぶ悄堋,!?/p>
ROHKI使用Warp Fusion將他們的視頻風(fēng)格化,。事實(shí)證明,擁有能夠支持這種風(fēng)格化轉(zhuǎn)變的動(dòng)作捕捉工具對(duì)他們創(chuàng)建具有獨(dú)特風(fēng)格的音樂(lè)內(nèi)容帶來(lái)了巨大的幫助,。他們只需將Movella Xsens采集到的動(dòng)作數(shù)據(jù)被傳輸?shù)教摶靡?,之后就可以通過(guò)Warp Fusion直接運(yùn)行風(fēng)格化轉(zhuǎn)換,整個(gè)制作過(guò)程非常流暢,。
Warp Fusion視頻風(fēng)格化轉(zhuǎn)換
ROHKI熱衷于使用最前沿的技術(shù)創(chuàng)造令人驚嘆的藝術(shù)作品,,除了制作長(zhǎng)篇音樂(lè)敘事動(dòng)畫(huà)外,他們還計(jì)劃使用Xsens的實(shí)時(shí)動(dòng)畫(huà)制作技術(shù)創(chuàng)建現(xiàn)場(chǎng)表演,,讓觀眾實(shí)時(shí)體驗(yàn)他們的音樂(lè)和動(dòng)畫(huà)作品,。Xsens和虛幻引擎的結(jié)合讓ROHKI有機(jī)會(huì)創(chuàng)造出超越傳統(tǒng)音樂(lè)視頻的全新藝術(shù)形式,ROHKI表示他們將繼續(xù)在該領(lǐng)域深入探索,,以推動(dòng)音樂(lè)動(dòng)畫(huà)突破現(xiàn)有界限,。