LibTV上新StarVideo2!火爆全网 AI 漫剧全流程教学!

熊猫办公

今年以来,我的重心偏向于视频制作,挺久没给大家分享过我的 AI 视频技巧教学了。
刚好 LibTV 上线了一个高阶视频生成模型Star Video 2.0,而且还是专门面向短剧创作和 AI 电影打造的。
感觉非常适合制作类似我之前单集破 2 千万的自制鬼灭之刃的连续短剧,借此机会,带大家从 0 开始复刻教学!

LibTV上新StarVideo2!火爆全网 AI 漫剧全流程教学!

不过,目前审核比较严格,很多平台已经不能出 IP 人物图和视频了,不过问题不大。我们可以换个思路去解决这个问题。
就是审核库里面会包含较为有名的作品,特别是视频类型的内容,因此,只要是爆火的 IP 视频都比较难绕过。
但是,据此我们可以进行反推,可以去找一些比较有名的漫画,还没动画的那种。
经过测试,我发现这个排名第一的漫画人物基本都能绕开审核:

LibTV上新StarVideo2!火爆全网 AI 漫剧全流程教学!

所以,下面我就以这部动漫作为例子,从 0 到 1 教大家如何进行制作。
这次我用的平台是 LibTV,官网在这:https://www.liblib.tv/

至于为什么是用 LibTV,我的详细考虑如下:

1、我们更新的漫画是长篇,并不是制作一两集就结束的,只要不被封禁,有可能连续更个几百集都有可能,在这种情况下,我们需要建立自己的资产库,例如,人物、武器、场景等等,这些都是大量需要复用的。
2、LibTV 提供的模型比较多,无论什么模型都支持,即使后续出现更加强大的模型,我们只要坐等它接入就可以了,这样永远都可以用得到最新模型。
3、支持团队协作,在同个画布上,我们可以把自己的制作流程分享给任何人,同时,也支持团队成员在同个画布中进行制作。
4、内嵌众多独家功能,能大大地降低我们的制作耗时,我们不再需要多个 AI 工具进行切换制作,仅一个平台即可解决一切!
5、刚上新了 StarVideo 2.0 视频模型,刚上线就被我发现了!经过我的一顿测试,发现确实无敌,能够自动拆解剧情生成连贯性多镜头视频,同时,音频和视频一起生成,非常自然,减少后期剪辑成本,而且基本全部东西都能进行参考,无论是视频还是音频,当然图片也是可以的。不过,唯一的缺点是目前只对企业团队的申请开放。

好了,话不多说,我们直接正式开始!
首先,我做的定位是二创,因此,人物图我们是不能随便生成的,要做到原汁原味的话,我们就可以直接去原漫画中里进行截取。

LibTV上新StarVideo2!火爆全网 AI 漫剧全流程教学!

但是,漫画是没有颜色的,至于色彩方面,我们可以参考使用漫画彩图或者 PV,能有 PV 最好,因为 PV 里面的色彩基本固定了未来动画后的色彩:

LibTV上新StarVideo2!火爆全网 AI 漫剧全流程教学!

有了这两张图,我们就可以拿去 LibTV 去生成三视图了:

人物鵺,帮我生成左边是大头照,右边是三视图,人物参考我上传的图片,图一是人物的特写图,图二是人物的全身图,背景纯白,无文字

我们可以多刷几次,找个好看一些的:

LibTV上新StarVideo2!火爆全网 AI 漫剧全流程教学!

关于人物图,个人还是比较建议,左边是大头照,右边是三视图,这样出来的视频效果会比较好,不会因为特写导致脸部细节发生变化。
由此,我们就可以将其它人物图也制作出来了:

LibTV上新StarVideo2!火爆全网 AI 漫剧全流程教学!

但是,这样还是不够的,即使是动漫人物,由于都是 AI 生成,有些会误撞 IP 人物导致审核不过。
所以,等我们生成完后,可以把全部的人物放一起跑视频,看看能不能过审核:

两个人物在说话

由于是测试,所以我们可以选择最低的分辨率和最短的时长,从而节约积分。
也可以多生成一两次,确保相对稳定能够出视频,等经过检验后,我们就可以将其归纳为资产了,方便后续每一集制作的时候使用:

我们保存的全部素材都在这:

LibTV上新StarVideo2!火爆全网 AI 漫剧全流程教学!

到这我们就解决了人物视图了,下面我们解决音频问题。
若是已有原片的话,我们可以在剪映中裁剪人物说话声音。这里有个细节,就是由于裁剪的是原片,所以,里面可能掺和着背景声,所以我们需要先进行“声音分离”后再进行导出:

LibTV上新StarVideo2!火爆全网 AI 漫剧全流程教学!

这样获得的声音会更清晰:

假如没有原片的话,那我们可以像刚刚测试视频那样,生成人物的说话视频,再去提取声音就好了。
至于,如何让人物说日语,以及如何使用我们提供的音色,这就需要依靠我们强大的“Star Video 2.0”模型:

我们看看效果,是不是很不错:

至于如何能让人物按照我们的剧情去表演,这里其实是有一个小妙招。
就是我们本身就是参考漫画进行生成的,而漫画内容本身就是一个很好的分镜效果,我们可以直接把漫画上传给“Star Video 2.0”模型,让其当成分镜进行参考:

LibTV上新StarVideo2!火爆全网 AI 漫剧全流程教学!

下面是具体的提示词,大家可以看看:

@图片1是A,@图片2是我给他们初步设计的台词和分镜图,A在教学楼里面走路,路上会飘着一些幻灵,旁白说日语:“幻妖是一种人们看不见的存在,没人知道他们是什么,但是”,切,旁白继续说日语:“他们会感知到人们的怒气和悲伤等情绪而集合过来”

LibTV上新StarVideo2!火爆全网 AI 漫剧全流程教学!

下面就是具体生成的效果了:

虽然还做不到跟漫画一模一样,但是相似度已经非常高了,基本已经十分符合需求,我们可以根据这种方式生成后续的剧情:

LibTV上新StarVideo2!火爆全网 AI 漫剧全流程教学!

乍一看,是不是感觉这次生成失败了,其实并不然,因为关键的东西都有生成了,例如走楼梯、开门、说话声、出现幻妖,吓到在地,全部元素都集齐了,我们只要稍微剪辑下即可。
下面是剪辑后的效果,大家可以看看:

是不是觉得很顺畅,还无违和感!
这个能力就不好教了,需要大家多做片子,多剪辑,大概就会有感觉了。
下面是我制作的完整片段:

好啦!基本核心内容就是以上这些了,大家不仅要看懂,还要多练习才行。
LibTV 的官网在这:https://www.liblib.tv/,也可以去试试刚上新的StarVideo 2.0 视频模型。
下次大家希望我拆解什么作品?


© 版权声明

相关文章