AI 绘制版《漠河舞厅》MV 火了,网友:感觉 AI 读懂了歌词

2022-10-16 12:46 98 阅读 ID:415
新智元
新智元

AI作画真的太强悍了!简直让不会画画的手残党平地起飞,变身“新海诚”!

就在国庆假期,B站上有名叫“拯救世界的狗子”的Up主,使用AI生成图画工具Midjourney给《漠河舞厅》整首歌配了一条MV。

因为这些由AI绘制的画作与歌词的文本内容高度吻合,不少网友纷纷表示,AI画出了他们听这首歌脑海中的景象,直呼画中漠河夜晚的极光太美了!

AI作画是AIGC(AI-Generated Content 人工智能生成内容)其中一个研究方向Vision-Language,即视觉-文本,输入文字描述然后生成图像,Midjourney就是这个领域的神器之一。

目前这条由AI绘制的《漠河舞厅》MV已经吸引了接近40w人观看,1.7w人点赞,有网友在这条视频下评论,“感觉AI读懂了歌词一样。”

AI为我画了一个瑰丽的世界

  2019年12月,民谣歌手柳爽在漠河采风时,在当地的一家舞厅遇到了一名独自跳舞的老人。
简单地交谈过后,柳爽得知了老人的妻子在1987年大兴安岭“五·六”特大森林火灾事故中遇难,自此老人一直未再婚、也无子女,并且喜欢以舞蹈来纪念爱跳舞的妻子。
柳爽以此故事为灵感,创作了《漠河舞厅》。
Up主“拯救世界的狗子”也为《漠河舞厅》这首歌叙述的故事所感动,并且依据这首歌的创作背景和歌词努力向AI描述了一个瑰丽的世界。当歌词唱到,“如果有时间,你会来看一看我吧?看大雪如何衰老的。”AI画了一幅一位老人独自站在白雪茫茫的乡间小路上,头顶闪耀着绚丽极光的图景,以及一张覆盖着厚厚冰雪的俄罗斯建筑风格街景图。  

接着男声唱道,“我的眼睛如何融化?如果你看见我的话?”

前一句歌词,AI画出了一位泪眼婆娑的银发老人的肖像图,后一句歌词,画面呈现的是一名白发苍苍老妇朝着一个垂首沉思的老夫微微倾着身子,好像在呼唤“如果我的时间没有定格在三十年前,我应该和你一样容颜迟暮,你能看见我现在的样子吗?”

这里歌词写道,“尘封入海吧……”

死亡带走了年轻的生命,记忆和身躯一起尘封入海,画中是一位穿着连衣裙的女子似是站在忘川底下,回望着过去。

在歌曲的间奏部分,AI画的还是漠河夜晚美丽的极光、人影重重的舞厅、朝着月光方向舞姿蹁跹的女子、戴着贝雷帽的短发女孩和极光划破天际的夜晚。

歌词又唱着,“我从没有见过极光出现的村落,也没有见过有人在深夜放烟火。”

随之映入眼帘的是一张眼底发光,脸庞稚嫩、叠着星海的男孩的面容,以及一名站在田野里、漫天烟花下的红衣女孩。

接着进入到这首歌中人们最爱的歌词,“晚星就像你的眼睛杀人又放火,你什么都没有说,野风惊扰我。”

AI画的是一只辉映着星空的眼眸,“星星像你的眼睛,它旁观着那个大火漫天的夜,任由火焰吞噬你的身体。”

草野上两个相距得很远、互相守望的人,静静地站在绿油油的极光下,怕似惊扰到对方,而唯一在动的事物是刚刚吹拂过绿树和耳畔的风。

而后,歌者唱起了老人的思念,“三千里,偶然见过你,花园里,有裙翩舞起。”

画中是在青色的极光下、两个逐渐靠近的人,还有花园里穿着白色连衣裙女子的背影。

接着歌词唱回到,“灯光底,抖落了晨曦,在1980的漠河舞厅。”

AI绘制了刚刚升起的太阳、漠河舞厅落地窗上的人形剪影,以及上世纪80年代人声鼎沸、五光十色的,“有你、也有我”的漠河舞厅。

不得不说,Up主“拯救世界的狗子”和AI共同创造了令人惊叹的作品,不仅人物风格有着相同的延续,不同场景色彩鲜亮且构图精巧,尤其是红日、日光和舞厅人形剪影那张,AI居然能把这些元素如此合理地放在一张图上,真的不可思议。

读懂歌词的人类和不懂亚洲人的AI

虽然许多作者在标题上声称“每一句歌词都由AI作画”,但想要让AI制作出贴合歌词含义,触达人心的画作,少不了人类作者的对歌曲背景和歌词意涵的解读,以及对歌词所营造氛围和场景的想象。

如果在AI作画时只输入歌词,这样的文字描述对于AI来说远远不够,必须要由人类作者把想象的画面精准地描述出来,AI才可以听懂要绘制怎样的画作。而且AI作画不是一蹴而就的,需要人类创作者在n张有相同或相似描述的图像中选出最贴合歌词意象的那一张,最后才能制成一条好的MV。正如《 漠河舞厅》AI绘制版本MV创作者“拯救世界的狗子”回应的,(不是AI读懂了歌词)“而是我读懂了歌词,用蹩脚的英文给AI描述的。”

  也有些网友留言,“很漂亮啊,但是这个画中的人物长相和穿衣风格似乎看着不像发生在中国。”“可能这个AI当初学习的时候没学亚洲人怎么画。”“这个素材库主要不是亚洲的,甚至东南亚和南亚的图库都很少,所以人物看起来很俄罗斯。”这些留言都戳中了AI绘画目前的痛点。许多AI生成图画工具在深度学习阶段使用的数据库大都来自欧美的图片网站,使得AI们都不太擅长画亚洲人的脸和东方的意象。尽管AI绘画还有很长的路要走,并不是所有画都完全精美,总需要人类画家去调整某些细节,在人像生成上还存在许多缺陷。从上面的MV截图中就可以找到AI作画的一些瑕疵,比如:“眼睫毛不应该夹杂着头发”、“人物四肢看起来不协调”和“头颅画得残缺”等。但是我们必须坦言AI绘画真的进步得很快,从以前只能画简单的牛油果形家具,到现在能创作出大型壮丽的画作,整体在色彩和构图已经取得很大进步,是会让人感到惊艳的程度。

也许未来AI就不是一帧一帧地作画,而是创作连续的动画,十分期待那一天的到来。

  参考资料:https://mp.weixin.qq.com/s/aAt6JL_8XFgVFl75wgUHaQ
本文经授权转载自微信公众号「AI科技评论」(ID:aitechtalk)  

免责声明:作者保留权利,不代表本站立场。如想了解更多和作者有关的信息可以查看页面右侧作者信息卡片。
反馈
to-top--btn