从 Stable Diffusion、Midjourney 引起的AI作画潮流,到大语言模型的全面爆火,AIGC 技术已然成为一种新的内容生成方式。
为了和北京电影学院影视技术系的同学一同探索AIGC技术与创意的交汇点。瑞云科技独家赞助了北京电影学院影视技术系举办的「幻像图生」AIGC图片创作大赛。这是一个让AIGC技术与想象力相互碰撞、交融的舞台。
赛后,青椒云也有幸与影视技术系的副教授李勃老师和获奖选手:高胡宇晨、陈俊良、赵可傲一起畅聊了关于AIGC的实践应用和行业影响。
"幻像图生"大赛获奖选手作品合集
Q1
青椒云:想问下老师是如何看待“AI生图”这种创作模式?
李勃老师: 我们希望AI可以去改变传统艺术,给传统艺术创作带来一些增量。
用AI这一新的工具,去探索新的生产形式,然后给我们艺术表达带来新的变革。
AIGC的出现在一定程度上与照相术的发明具有相似性,早期的照相术出来之后,古典主义的绘画师,也受到了信息技术的冲击,严重影响了那一批人的生存状况。然后传统的绘画师们就需要去创新,比如说开始去探索印象派,做立体派或者野兽派等等这些新的风格流派和表达方式。
高胡宇晨选手的作品
所以,AI技术的出现对于目前艺术创作来说,也会这样带来更好的影响。让我们传统的一些技术创作方式变得更精彩。 激发出大家更多的热情去在形式和表达上有探索。
我们是希望有一些AI创作的作品更加具有特色,某些作品可能只有运用AI才能创作出来,是其它的传统手段做不来的。 不管目前AI带给我们的改变是主动的还是被动的,我都希望它能够有更多正面的影响。
现阶段我们接触的很多作品,还只是利用AI对传统美术和摄影做了一定程度上的替代,还不够新;还没有出现一些特殊的AI作品,我们想要看到的AI作品是比现在传统创作方式更丰富更新颖。
就像有些新古典主义绘画,非常有特色,画出来作品的细节,照相术反而可能表达不出来。
高胡宇晨选手的作品
而且,传统绘画的作图思维和AIGC的作图思维不一样。
当你用AIGC创作的时候,整个过程会受到很多不定性的影响,这个就是AI创作跟以前传统美术特别大的区别。
传统绘画的方式是自下而上有逻辑的作图思维,你平时脑子里想了一个画面,然后动手开始做,在创作过程中,头脑中的那个目标是不变的。
但是利用AI生成图像不一样,每一次生成的东西都是具有完成度的结果,可能在不断的生成图像的过程中,突然出现一个新的画面,带来一些在创作者脑海中不曾想到的东西,然后创作者就被AI就被带了新的画面中去。
我们也发现AIGC作图的一个现象,不同风格的人使用AI就会做出来和他本身风格相近的图。
因为我们的参赛选手,在大学阶段受过的影像训练比较多。所以做的很多AI作品,就会比较的偏电影类的东西,多一些电影质感。
高楚怡选手的作品
但是我们看到网上的一些摄影师做出来东西,就非常像摄影图片,漫画师做出东西更偏向漫画风格,搞商业设计人做的AI图片,就会更加的偏向商业设计风格。
Q2
青椒云:网络有很多的言论说AIGC会替代一些设计师,你怎么看待这种说法?
李勃老师: 现在网络讨论最多的是用AI大量做海报,这种是可以实现的。但对AI来说,如果它的作用只是替代某些职位,这件事就过于简单,太局限了。
我心中,AI真正的作用,应该改变世界。
像我们照相术技术的发明出现,并不是只让一些古典的画师失业。而是激发大家去创造出新的流派,新的风格,用这种技术的东西去推动我们艺术观念的进步。 事实上每一次技术的出现,都会带来观念的进步。
而且,现阶段,AIGC要直接替代一部分创作者,也是非常具有难度的。
高楚怡选手的作品
现在的AIGC工具,更像是我们创作中的一个陪伴工具。 就相当于我们多了一个创作伴侣工具,所以这种工具的随身性,真的是非常重要;它需要足够的方便。
现在想把AI做成可以替代传统创作的工具,是特别特别难的,因为AI的不可控性特别强,而且这个工具还要门槛特别的低,谁都能直接上手,现阶段非常难实现。
传统创作中,你在作画的时候会有一个很清晰的反馈。比如手法不对,你可以练习手法,自己可以去针对性调整,优化细节。 但是相对于AI来说,AI不可控,你自己不知道AI下一秒会出来什么图。
李嘉琪选手的作品
还有一点,就是AI作图,你要选一个好的作品出来,这对创作者的审美要求也非常高。
AIGC的另一难点,在于从大量的生成出的图片中做出选择。 挑选出来一张非常满意的图片,有时候可能比你自己做一张要更多的时间。
高胡宇晨选手的作品
创作者要自己有好的审美,才能利用AI生成出好的图片,这一点是基础。 而且每个人的想法不一样,每个人想要的风格也不一样。
如果只是把AI用来做参考或者是辅助生产,类似于灵感启发型这种,现阶段已经很成熟了。
Q3
青椒云:现阶段我们怎么更好的把AI运用到传统生产中?
李勃老师: 现阶段来讲,要把AI运用到传统生产里面其实是一个挺难的事情。 因为传统生产中,生产的产品最终是要解决用户的需求场景和使用流程问题。
目前的影视制作流程已经相当的成熟稳定,AIGC工具想要在流程中发挥出其自身优势,需要针对影视制作的特点,专门的开发AIGC工具,让AI生成的内容,更加具有可控性和可调节性,能够更好的嵌入到影视制作流程之中。
我们现在用的更多的AI实践,更多的让AI用图生图出一张其他风格的图片,拿来给美术去做参考,给调色师做色彩参考,这种不改变传统流程的方法是更加易于实现的。
梁珂滢选手的作品
目前我们很难直接将AIGC生成的图像用于影视内容中。 我们可以用AI拿出几套方案,来帮助我们激发创作灵感。
以往我们要上网找一张非常针对性的图片,肯定很难实现,但是现在AI,我们用图生图的方式,给它图片或者把你要的东西,要的效果告诉它,它就可以给一张类似的效果图。
只要能给到艺术家一两点可以参考和启发的地方,AIGC就已经创造出不小的价值了。
Q4
青椒云:目前AI在影视行业的传统生产流程中有实际应用吗?
陈俊良: 现在已经有些短片开始拿AI做分镜脚本,或者用AI来做美术参考,甚至直接生成短片。
比如最近看到漫威出了一个新剧:秘密入侵,已经在用AIGC直接做片头,也是一种比较新鲜的尝试。
漫威新剧《秘密入侵》(图片源于网络)
在片头最后有一个图片控制生成变换,AI的“扩散融合”方式慢慢生成这个眼睛画面,这是也算是AI一种特色。
AI扩散融合的制图技术(图片源于网络)
B站上也很多类似的作品,通过图生图慢慢扩散融合出现不同的画面,这种画面和画面之间不同,但是又相融的过渡,与以往三维追求物理拓扑变换的变换是完全不同的。
我们之前也试过拿AI做视频,但是那种连续的抽象变形有时候并不好控制。 但是如果像做日漫那种动画,就可以避开有这个问题,大部分元素都是静态平面,可以避开连续画面中的结构变化。
Q5
青椒云:我们看到你的作品中细节非常丰富,在制作的过程中是怎么控制AI的?
陈俊良: 在用SD作画的时候,可以使用很多的关键词。 比如你通过提示oc渲染器,ue渲染引擎渲染的效果,也可以提示它要高细节。甚至在关键词中去提示一些不同的导演或摄影的风格,进行关键词叠加。
现在用AI作图人脸部的细节经常有问题,当然也有对应的工具能解决,比如通过face swap,然后把脸的部分进行替换。
陈俊良选手的作品
整个作品底下是那种工业城市,有一种那种废墟荒芜的感觉。这张图里面的脸没有替换,我觉得脸部的这种不自然正好符合这个主题,他需要一个比较扭曲的状态,我就保留下来他扭曲的脸。
还有一点比较有意思的是列车,在原剧中是一个很重要的元素。我们平时的想象中,正常的画面里列车可能都是在地上,或者在一个平面上, 但是这里刚好AI能够实现画面元素的奇特排布,是吊在空中,这挺有意思。
Q6
青椒云:这个提示词是你写了在天上的火车吗?AI它怎么出来的这个创意?
陈俊良: 这是AI自己创造的,AI创作的构图设计,跟我们平时做动画做电影的思路、创意经常可能都不太一样,更天马行空。
火车在天上这个画面,完全是AI自己想出来的,我没有限定AI要把火车放在哪里。 有时候我们很难想象,你拍一个照片要把车放在不寻常的位置,有时候思维已经被一些生活的情况圈住了,这时候AI经常会给你一个意想不到惊喜。
我在创作这个作品的时候,不是特别复杂,当时写的提示词是“有几个人在火车旁边”,但是加了一些摄影风格类的关键词。
还有些提示词,甚至可以具体到70毫米的胶片或者35毫米的镜头拍摄,像超广角镜头。以及增加一下极强的运动感 ,通过这种关键词提示,可以让AI做出来一些比较有意思的带视觉动态的图片。
陈俊良选手的作品
Q7
青椒云:听说你的作品被评委点名表扬,说你对AI的理解很深,可以分享下你的创作思路嘛?
赵可傲选手的作品
赵可傲 : 我的想法主要就是,想要用AIGC做点以假乱真的那种效果。 这张作品的这个长宽比,当时是想要做一个手机街头摄影的感觉。
赵可傲选手的作品
我做提示词的时候,其实是先用一些自然语言描述。然后让ChatGPT帮我生成提示词,再加上一些插件的自动补全;整体的提示词就会给的很多。
赵可傲选手的作品
有些作品,其实可以作为一个全景HDRI(数字影像技术)用,当时做的时候还找了一个SDR to HDR的模型上转了一下,然后也进CG软件套了一下。
平时的话,这种图片有可能会直接放到生产工艺里面的一个组成部分去用。
Q8
青椒云:这张图看起来很有意思,为什么这样去创作嘞?
高胡宇晨选手的作品
高胡宇晨: 这张图是我的狂飙主题的作品,创作的过程中比较有意思的一点是,我在给提示词的时候让AI不要出现“车”。
当时是做了特别多张图,去找没有车的作品,没有车的图片,整体感觉会更有狂飙的氛围。
Q9
青椒云:除了这次AIGC的比赛,平时会不会用SD来创作?
高胡宇晨: 之前在美术参考时候用过,比如说我想找一个中国古风相关的元素,然后我就尝试了用AI做。
有试过去把一个很普通的鼓,用AI加上更多中国风的元素会怎么样?就一遍一遍的做过了一些尝试。
日常用AIGC的频率不算特别的高,但确实有设想过把AI加入日常工作。 特别是我们之后有大作业,要做一个比较完整大片子,现阶段是很适合用AIGC去做。
高胡宇晨选手的作品
AI并不一定要作为一个主要元素,有点像现在蜘蛛侠平行宇宙这些题材。 可能会把AI的内容作为一个视觉风格在作品中展示。
蜘蛛侠平行宇宙截图(图片源于网络)
但是如果要做一个大片子,我现在技术积累可能还不够。 而且不只是我的积累不够,可能整个行业也没有特别好的工具能直接让我们直接去用。
现在AIGC做视频还是有点闪烁,可操作性没那么大。给大家呈现的风格,更多的还是破坏感更多一些,这种风格较为固定,时间久了观众还是会视觉疲劳的。
Q10
青椒云:平时你们会在哪里看一些AIGC方向的内容?
高胡宇晨: 平时会在微博、知乎、C站一些平台看AIGC的相关内容,但是现阶段我也只是关注和观望。
不过现在经常刷到很多同质化的内容,像C站大部分的内容都是同质化那种,之前我还觉得这部分内容会很快淘汰的。
高胡宇晨选手的作品
除了我,我自己身边的同学很多也在关注AIGC领域,他们研究AIGC很深入,更偏向于技术流派。很会用lora这一些大模型。
创作的方式很有意思,基本上先用Midjourney出一个图片,再使用stable diffusion二次加工优化。
Q11
青椒云:本次AI创作比赛是什么原因让你考虑用青椒云来创作?
高胡宇晨: 我自己的电脑本身配置也比较好,是3090的显卡,显存要比A4000大。但是用青椒云确实方便,一方面我可以不用自己的电脑,因为用自己电脑来作AI,对显卡的耗损其实比较大。
其次是和我的作图方式有关,我自己喜欢用AI训练100张,然后选出一张。 用自己的本地电脑,就没有一个机房的环境,显卡散热和耗损都是问题。
而且感觉青椒云平台使用起来,比较像是常用的远程桌面那种体验,整体体验青椒云还是比较流畅的。
青椒云界面选择不同的配置电脑
还有一点是我早期接触SD,都是从网上平台看到各种分享教程,然后自己配环境来部署,这种流程比较麻烦。
青椒云内置stable diffusion
当时是比较的早期,还没有秋叶整合包,所以是只能在本地来部署。我初赛的时候花了蛮多时间在本地调配环境部署了有5、6个小时,决赛时候用的是青椒云AIGC套餐省了很多部署时间。
结语
以上就是青椒云本次访谈所有的内容。
这次,很感谢北京电影学院影视技术系同学们呈现的精彩内容。同时祝愿所有同学都可以在AIGC领域,收获自己想要的“闪光点”。青椒云会持续助力AIGC领域的发展,和大家共同探索AI创作的新形式和新“生命力”。
-你可能错过的好文-
👇点击阅读原文「免费试用」