AIGC体验3-用Fliki+大模型制作短视频

前面两篇短文向大家简要介绍了midjourney来进行绘图,今天向大家简要介绍一个支持在线的短视频制作的工具Fliki,不足之处欢迎大家批评指正并予以补充。

Fliki的官网为Fliki – Turn text into videos with AI voices, 其主要是根据故事分镜头来制作短视频,分镜头(storyboard)是影视制作中的术语,大概是一个连续的镜头来描述一个场景(如长镜头,宽镜头,远镜头等)。这方面经验也不是很足,以后有机会再补充相关细节。

首先我们用大模型(ChatGPT,通义千问,文心一言等)生成故事的分镜头脚本描述,也可以自己去描写。这里我们以登鹳雀楼为例,自己写的一个简单的分镜头场景描述来进行说明(暂时没有用到大模型来生成场景描述),用的是通义万象来生活场景图。

提示词:夕阳西下,太阳躲到了绵延远山的另一边,白色的余晖映在黄河的水面上
提示词:黄河水流潺潺,水面渐渐宽阔,奔流向东边宽广的海洋
提示词:河边的鹳雀楼在群山的高处,可以俯瞰连绵的黄河和更远处的群山
提示词:我登上了鹳雀楼,极目远眺,还有远处的风景在山水的那一边,我再爬上一层,为了去看更远的地方

基于上述场景文字生成的图片后,我们就可以再Fliki中去生成这首小诗的短视频了,具体方法为下面的截图演示:

step1:New File
step2:选择video,并输入文件名,选择语言和长宽比等
step3:选择script,将刚才每个场景的文字输入到Script字样下方的对话框中,一段为一个场景
step4:在每一个场景中将图片重新设置为上述文生图的结果

有必要对语音进行优化,可以考虑借助第三方语音合成平台生成整个的语音放到common sense的场景中去(最上方)。然后在每个分场景中去掉voiceover的layer。基本设置好后,就可以export然后就download了(注:为了去除水印,需要upgrade成会员)

更多的经验会在后续继续向大家介绍。

References

Comments

Leave a Reply

Your email address will not be published. Required fields are marked *