12月初, 中国一家上市公司信达雅股价连续涨停6天,背后推手竟然是因为董事长女儿创办了一家叫PIKA的AI生成视频的公司。不得不说,在拼爹时代,人家真的是拼娃的成功典范
这位董事长女儿叫郭文景,而PIKA在12月初发布了demo视频的时候还没有全面对外开放。趁着圣诞节后的第一天,PIKA终于全面开放,而且免费!感慨上市公司千金的大手笔之外,也默默在感叹:美国连圣诞假期都开始卷了,也许是因为这两家公司里都有华人,圣诞不圣诞的可能也没那么重要。而PIKA的开放和MidJourney 的V6 发布, 可以说是AIGC领域的”圣诞双雄”了。
总的来说,AI生成视频要达到普通场景可用的程度,还是有一段路要走,主要原因是:
-
目前PIKA默认支持3秒视频,虽然可以增长,但不能支持连续镜头变化。你可以理解是一张图片在小范围内放大或者缩小的那种动画感觉。
-
语义理解水平不高: 比如它无法理解“fireworks”这个单词。
-
人物、动物动作失真:对于静态风景生成的视频尚可。但对于人物动作,有明显的失真。
不过因为是免费的,加上我的内容对画质要求本来就不高,确实可以用来制作简易素材。反正免费的,不用白不用,接下来就和大家分享整个过程。
先给大家看看Pika官网社区,目前社区还只是个样板房,仅陈列了少量作品,且基本都是圣诞题材的,也没有呈现其他用户的作品。
用户只要在下方可以输入文字,并上传参考图或者视频进行制作。
顺着圣诞节,我做了一个中国新年的视频,整个过程花了半个小时,效率确实提高了不少,大家在我视频号看成品。
2.1 手把手使用PIKA进行视频创作
我的思路是:展现雪中村庄除夕那天白天到晚上的场景,用四段视频拼接而成。 下图就是每段视频以及对应的提示词(PIKA不支持中文,我翻译过来便于大家观看),可以说是非常简单了。
接下来就说说详细的过程。
第一段视频提示词是:
snowing, Chinese countryside, sunshine(下雪,中国乡村,阳光)
第二段视频是 在第一段视频的基础上修改 (点击第一段视频的Edit按钮),然后提示词中我把sunshine(阳光)去掉,改成night, light is shining(夜晚,灯光)。
snowing, Chinese countryside
, night, light is shining(下雪,中国乡村,夜晚,灯光)
第三段视频:基于第二段的视频编辑,加上“new year's eve, Every house hung up red lanterns”(除夕,每个房子前挂上红灯笼)
snowing, Chinese countryside , night, new year's eve, every house hung up red lanterns,light is shining(下雪,中 国乡村,夜晚,除夕,家家户户挂红灯笼 ,灯光)
第四段视频: 本来想放一段表现家家户户出来放烟花的的场景,结果PIKA 总是读不懂Fireworks这个词 。 随便输入了一段提示词反倒出现了烟花的画面。
snowing, Chinese new year , countryside, light is shining(下雪,中国新年,乡村,灯光)
最后把这四段视频放在剪映里合成,配音乐,就合成了开头的视频。
不过,上述看似流畅的过程中也确实有些“ 插 曲”,主要是以下三个槽点。
3. 吐槽
3.1. 语义理解较差
比如无法理解fireworks 这个词,我输入提示词:
snowing, Chinese countryside, night, new year's eve, Every house hung up red lanterns, light is shining, people are playing fireworks
( 下雪,中国乡村,夜晚,除夕,家家户户挂红灯笼,灯光,人们在放烟花 )
直接做了一团火球。
又比如我还希望做一段视频是大家在吃饺子,提示词是:
Happy Chinese family making dumplings(一家中国人一起包饺子)
结果做出的这样的一段视频:
3.2 人物动作失真
我输入一张参考图,然后希望图上的小女孩和小狗能跑起来,结果是这样的,两只小狗的头都跑飞了。
总结
如果我们回望过去一年MidJourney绘图的变化(下图),现在PIKA的水平可能和MidJourney 在2022年2月的时候差不多。
视频本质上是图片冗余扩充后,再进行拼接展示。视频生成软件需要在对图片扩充时保持一定的连续性和逻辑合理性。说实话,现在一切基于深度学习的内容生成技术在逻辑合理方面确实是个短板,AI视频工具是否能攻破这个难题,我们拭目以待。
最后,在新年即将到来的时刻,提前祝大家元旦快乐!
我是关注AI产品的产品二姐,致力于带来丰富的AI学习分享、体会,欢迎你和我一起学习,如果你觉得文章有用,欢迎关注、点赞、转发。