是 " 新海诚吗?" 不,是 AI。
作者丨施方圆
编辑丨陈彩娴
AI 作画真的太强悍了!简直让不会画画的手残党平地起飞,变身 " 新海诚 "!
就在国庆假期,B 站上有名叫 " 拯救世界的狗子 " 的 Up 主,使用 AI 生成图画工具 Midjourney 给《漠河舞厅》整首歌配了一条 MV。因为这些由 AI 绘制的画作与歌词的文本内容高度吻合,不少网友纷纷表示,AI 画出了他们听这首歌脑海中的景象,直呼画中漠河夜晚的极光太美了!
AI 作画是 AIGC(AI-Generated Content 人工智能生成内容)其中一个研究方向 Vision-Language,即视觉 - 文本,输入文字描述然后生成图像,Midjourney 就是这个领域的神器之一。
目前这条由 AI 绘制的《漠河舞厅》MV 已经吸引了接近 40w 人观看,1.7w 人点赞,有网友在这条视频下评论," 感觉 AI 读懂了歌词一样。"
1
AI 为我画了一个瑰丽的世界
2019 年 12 月,民谣歌手柳爽在漠河采风时,在当地的一家舞厅遇到了一名独自跳舞的老人,简单地交谈过后,柳爽得知了老人的妻子在 1987 年大兴安岭 " 五 · 六 " 特大森林火灾事故中遇难,自此老人一直未再婚、也无子女,并且喜欢以舞蹈来纪念爱跳舞的妻子,柳爽以此故事为灵感,创作了《漠河舞厅》。
Up 主 " 拯救世界的狗子 " 也为《漠河舞厅》这首歌叙述的故事所感动,并且依据这首歌的创作背景和歌词努力向 AI 描述了一个瑰丽的世界。
当歌词唱到," 如果有时间,你会来看一看我吧?看大雪如何衰老的。"
AI 画了一幅一位老人独自站在白雪茫茫的乡间小路上,头顶闪耀着绚丽极光的图景,以及一张覆盖着厚厚冰雪的俄罗斯建筑风格街景图。
接着男声唱到," 我的眼睛如何融化?如果你看见我的话?"
前一句歌词,AI 画出了一位泪眼婆娑的银发老人的肖像图,后一句歌词,画面呈现的是一名白发苍苍老妇朝着一个垂首沉思的老夫微微倾着身子,好像在呼唤 " 如果我的时间没有定格在三十年前,我应该和你一样容颜迟暮,你能看见我现在的样子吗?"
这时歌词写道," 尘封入海吧 ……"
死亡带走了年轻的生命,记忆和身躯一起尘封入海,画中是一位穿着连衣裙的女子似是站在忘川底下,回望着过去。
在歌曲的间奏部分,AI 画的还是漠河夜晚美丽的极光、人影重重的舞厅、朝着月光方向舞姿蹁跹的女子、戴着贝雷帽的短发女孩和极光划破天际的夜晚。
歌词又唱着," 我从没有见过极光出现的村落,也没有见过有人在深夜放烟火。"
随之映入眼帘的是一张眼底发光,脸庞稚嫩、叠着星海的男孩的面容,以及一名站在田野里、漫天烟花下的红衣女孩。
接着进入到这首歌中人们最爱的歌词," 晚星就像你的眼睛杀人又放火,你什么都没有说,野风惊扰我。"
AI 画的是一只辉映着星空的眼眸," 星星像你的眼睛,它旁观着那个大火漫天的夜,任由火焰吞噬你的身体。" 与草野上两个相距得很远、互相守望的人,静静地站在绿油油的极光下,怕似惊扰到对方,而唯一在动的事物是刚刚吹拂过绿树和耳畔的风。
而后,歌者唱起了老人的思念," 三千里,偶然见过你,花园里,有裙翩舞起。"
画中是在青色的极光下、两个逐渐靠近的人,还有花园里穿着白色连衣裙女子的背影。
接着歌词唱回到," 灯光底,抖落了晨曦,在 1980 的漠河舞厅。"
AI 绘制了刚刚升起的太阳、漠河舞厅落地窗上的人形剪影,以及上世纪 80 年代人声鼎沸、五光十色的," 有你、也有我 " 的漠河舞厅。
不得不说,Up 主 " 拯救世界的狗子 " 和 AI 共同创造了令人惊叹的作品,不仅人物风格有着相同的延续,不同场景色彩鲜亮且构图精巧,尤其是红日、日光和舞厅人形剪影那张,AI 居然能把这些元素如此合理地放在一张图上,真的不可思议。
2
读懂歌词的人类和不懂亚洲人的 AI
虽然许多作者在标题上声称 " 每一句歌词都由 AI 作画 ",但想要让 AI 制作出贴合歌词含义,触达人心的画作,少不了人类作者的对歌曲背景和歌词意涵的解读,以及对歌词所营造氛围和场景的想象。
如果在 AI 作画时只输入歌词,这样的文字描述对于 AI 来说远远不够,必须要由人类作者把想象的画面精准地描述出来,AI 才可以听懂要绘制怎样的画作,而且 AI 作画不是一蹴而就的,需要人类创作者在 n 张有相同或相似描述的图像中选出最贴合歌词意象的那一张,最后才能制成一条好的 MV。
正如《 漠河舞厅》AI 绘制版本 MV 创作者 " 拯救世界的狗子 " 回应的,(不是 AI 读懂了歌词)" 而是我读懂了歌词,用蹩脚的英文给 AI 描述的。"
也有些网友留言," 很漂亮啊,但是这个画中的人物长相和穿衣风格似乎看着不像发生在中国。"
" 可能这个 AI 当初学习的时候没学亚洲人怎么画。"
" 这个素材库主要不是亚洲的,甚至东南亚和南亚的图库都很少,所以人物看起来很俄罗斯。"
这些留言都戳中了 AI 绘画目前的痛点。许多 AI 生成图画工具在深度学习阶段使用的数据库大都来自欧美的图片网站,使得 AI 们都不太擅长画亚洲人的脸和东方的意象。
尽管 AI 绘画还有很长的路要走,并不是所有画都完全精美,总需要人类画家去调整某些细节,在人像生成上还存在许多缺陷,从上面的 MV 截图中就可以找到 AI 作画的一些瑕疵,比如:" 眼睫毛不应该夹杂着头发 "、" 人物四肢看起来不协调 " 和 " 头颅画得残缺 " 等,但是我们必须坦言 AI 绘画真的进步得很快,从以前只能画简单的牛油果形家具,到现在能创作出大型壮丽的画作,整体在色彩和构图已经取得很大进步,是会让人感到惊艳的程度。
也许未来 AI 就不是一帧一帧地作画,而是创作连续的动画,我们期待那一天的到来。
原文地址:http://www.myzaker.com/article/634629bf8e9f0972bf640e2b