做了一个把普通视频转成深度视频的小工具,方便 AI 视频复刻动作

8 月 2 日
 wanxiaoba123

最近做了一个 AI 深度视频生成器。https://promptsref.com/tool/AI-Video-Generator/AI-Depth-Video-Generator 上传一段普通视频,它会逐帧提取人物动作、镜头运动和空间远近关系,转换成深度图视频。生成结果可以作为 AI 视频模型的参考,用来保留原视频的动作节奏,同时替换人物、服装或场景。 目前支持 MP4 、MOV 、WebM ,最长 30 秒。比较适合舞蹈、武术、跑酷、换装这类动作较复杂的视频。 工具还在继续优化,欢迎大家试用。如果遇到转换效果不好或使用不顺的地方,也欢迎直接回复反馈

1815 次点击
所在节点    分享创造
2 条回复
bkingfilm
8 月 2 日
单目深度是逐帧独立估的,每帧各自归一化。镜头一推近或者背景一换,整张图的明暗基准就跳一下。人眼看着还行,喂给视频模型就是忽远忽近地抖。加一层时序平滑,或者直接换视频版的深度模型,会稳很多。

另外只给深度,换人的时候手最容易崩。肢体一交叠那块深度图就糊成一坨。再叠一层姿态骨架一起喂,手和脚的还原率高不少。
polulee
8 月 12 日
你好,我是连尚集团云汉孵化的投资经理。主要看 AI 项目,无业务对赌,也没有各类服务费管理费,不插手公司日常经营。刷到你的 AI 项目,感觉方向挺契合,有空简单聊两句吗?

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://v2ex.ih06.com/t/1231525

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX