数字人智能课程平台新增AI导演控制器,随意控制镜头的动画

AI 知识库24小时前发布
816 0 0
熊猫办公
这几天在优化数字人智能课程平台的时候,给平台新增了一个AI导演控制器,就是可以通过关键帧来控制镜头的移动。
这个想法的来源还是来自于有言数字人平台那种三维动画,正好我的课件制作模块也支持threejs的场景和相机功能,在调研过程中发现了几个国内外大神单独做的类似功能,于是将他们统统整合在一起了。
数字人智能课程平台新增AI导演控制器,随意控制镜头的动画
一不小心就整了一个视频编辑器。
目前功能:
1. 选择场景(2D或3D)、数字人、素材(图片、视频、音频、模型)、文字片段,将他们分别拖拽到轨道中,添加关键帧合成视频。
数字人智能课程平台新增AI导演控制器,随意控制镜头的动画
2. 运镜预设:
推近、拉远、横移、升降、摇镜、环绕、变焦、希区柯克变焦
数字人智能课程平台新增AI导演控制器,随意控制镜头的动画
3. 添加文字选择音色,自动合成声音
数字人智能课程平台新增AI导演控制器,随意控制镜头的动画
带导演控制镜头功能。
数字人智能课程平台新增AI导演控制器,随意控制镜头的动画
目前合成视频效果:
大神的导演控制器案例:
1. 来自@肖师傅用Claude Fable 5创建的AI导演控制器。
数字人智能课程平台新增AI导演控制器,随意控制镜头的动画
2. 来自@DynamicWang自己做的3D导演工作台AWPlanet
AWPlanet工作台则将游戏引擎的方法引入3D工作台,可以选择控制角色或者控制镜头,让运镜自由自在! 所见即所得的编辑你想要的分镜,Direct what you see! AWPlanet 可以支持定义动作造型、雕刻地形、生成房间、迷宫,自定义上传obj道具,多镜头运镜设计以及fpv模式的自由运镜模式。
提供三种导演模式,其中「虚拟拍摄模式」面向更直观、更具现场感的镜头创作流程。 在该模式下,用户可以通过 iPhone 连接电脑端,将手机转化为实时虚拟摄影机,在 3D 场景中自由取景、移动与录制。创作者能够像在真实片场中掌机拍摄一样,直接通过手机感受镜头运动、空间距离与画面节奏,快速捕捉更自然的运镜效果。 系统支持实时预览与切换镜头焦段、景别和构图方式,用户可以在拍摄过程中即时判断画面表现,从特写、中景到远景,从广角到长焦,都能根据叙事需要灵活调整。虚拟拍摄模式让导演、分镜师和创作者在生成影像前,先以真实拍摄的方式完成镜头调度与视觉设计,使 AI 视频创作拥有更接近专业片场的控制感与沉浸感。
3. 国外大神直接开源了一个类似的应用film-space
https://github.com/maxprokopp/film-space

Filmspace 专为 AI 视频工作流程而打造。先在 3D 中搭建场景,然后用手机的相机模式在场景中走动,模拟真实的镜头运动。录制这段素材,并将其导入 Seedance 2.0 等工具——录制的内容能为模型提供清晰的场景搭建和镜头路径参考,从而将你在现实生活中进行的动作映射到风格化或生成的输出中。

电影空间为您提供了一个轻便的拍摄环境,方便您进行镜头调度和镜头探索:

  • AI 风格迁移工作流程— 在这里录制你的场景,然后将该片段用作 Seedance 2.0 等工具中的运动/摄像机参考,以应用新的外观,同时保留你在现实生活中走过的路径。
  • 虚拟演播室——一个带有棋盘格地板、网格和轴线引导线的 3D 空间,以便您可以确定拍摄对象和摄像机的位置。
  • 真人替身——添加、选择、旋转和重新定位人物占位符,以遮挡场景中的演员。
  • 编辑模式——围绕工作室旋转,放大和缩小,从鸟瞰或特写视图安排你的布景。
  • 相机模式——手持手机在场景中移动。身体的移动会转化为相机的移动;倾斜和转动手机即可环顾四周,就像在片场操作真正的摄像机一样。
  • 镜头模拟——循环切换 35mm、50mm、75mm 和 200mm 焦距,预览不同的视野。
  • 录制——捕获渲染场景(带麦克风音频)并将视频保存到您的照片库。
写在最后
这个数字人课程系统继续保持每日一更的速度在更新着,有合作意向的欢迎私信聊。接下来准备整合各个有趣的课程效果。
关于作者
做一只爬的最久的乌龟,保持学习保持好奇,即使慢一点,遇到一点困难,只要最后能到达终点,又有什么关系呢。
毕竟人生没有白走的路,每一步都算数。
© 版权声明

相关文章