近日,推特瘋傳一支動畫,一位動畫美少女表演韓國女團「宇宙少女」(WJSN)2019 年推出的歌曲〈Boogie Up〉熱舞的影片,不到兩天已超過 400 萬次瀏覽,角落還附上了一位真人跳舞的畫面,很明顯告訴大眾這是一部運用 AI 技術 StableDiffusion 生成的動畫。
該動畫的焦點除了美少女的神韻到位與肢體動作流暢度相當高之外,如果仔細暫停觀看,你會發現動畫美少女的衣服會改變,她的手指有時候會有不自然的地方,這些都是 StableDiffusion 過去的通病,但若播放後這些小細節便很難察覺,也獲得許多網友高度讚賞。
而這部影片則是海外網友 neilwong2012 透過 StableDiffusion 的外掛插件「ControlNet」所製作,這是一個在 AI 生成圖片前由使用者來印上一個基礎的圖上,再透過 ControlNet 來補上其他的部份。
以簡單的角度來說,今年 2 月,ControlNet 插件有了新的功能,「Muti-ControlNet」,可以連續生成圖片,於是這樣的技術便被 neilwong2012 所運用,他將這支真人熱舞的影片,直接運用 ControlNet 連續算圖而產生。
I transform real person dancing to animation using stable diffusion and multiControlNet
by u/neilwong2012 in StableDiffusion
當然,不論是 StableDiffusion 或是 ControlNet,這並非一般玩家或使用者就能短時間學會使用,通常許多細節地方必須不斷調整才有較可看性的作品,但比起傳統作畫或動畫製作的耗時過程, StableDiffusion 儼然已經掀起了新的工業革命。
事實上,海外 YouTube 創作團隊 Corridor Crew 上個月也發布了他們運用真人拍攝結合 StableDiffusion 技術製作的動畫影片,影片中他們也強調未來 AI 這項技術將會大幅衝擊日後動畫工業。
忘了補說,知名樂團「聯合公園」(Linkin Park)的新曲〈Lost〉PV 也是透過 AI 動畫協助製作而成。
換言之,我們之後只會看到更多 AI 輔助生成的動畫,這也是科技演化的必經之路。