资源编号
254最后更新
2025-04-07运动笔刷功能支持用户上传任意一张图片,通过 “自动选区” 或 “涂抹” 选中图片中的某个区域或主体,添加运动轨迹,并输入符合预期的运动 Prompt(主体 + 运动)。点击生成……
运动笔刷功能支持用户上传任意一张图片,通过 “自动选区” 或 “涂抹” 选中图片中的某个区域或主体,添加运动轨迹,并输入符合预期的运动 Prompt(主体 + 运动)。点击生成后,模型将为用户生成添加指定运动后的图生视频,实现对特定主体运动表现的精准控制,进一步完善了进阶的图生视频可控生成功能。
该功能可按用户意愿生成期望区域或主体的指定运动,比如图生视频中较难实现的 “球类运动”,以及 “人物 / 动物转向和行走路线” 等场景。此外,平台还支持 “静态笔刷” 功能,使用静态笔刷涂抹后,模型将固定涂抹区域的像素点,防止运镜发生。若不希望运动轨迹引发镜头运动,建议在图片底部使用静态笔刷。
输入文字提示 | 输入原始图片+操作图片 | 视频 |
帆船在海上缓慢行驶,大海泛起波浪 | ||
小草被风吹动,两只拘向不同方向转头看向远方 | ||
苹果下落,掉进水里 | ||
操作技巧
1、使用运动笔刷功能时,建议添加 Prompt 描述,且描述内容与区域主体的运动保持一致,遵循 “主体 + 运动” 的提示词写法,如 “小狗在路上跑”。
使用案例 | 成功控制 | 失败控制 |
用户意图:让这只猫跳过碗 | prompt:一只猫跳过了面前的碗 | prompt:一只猫往前走了过去 |
|
|
|
2、选中物体的关键性局部(如动物的头),能实现更精准的运动控制。
使用案例 | 成功控制 | 失败控制 |
用户意图:让哈士奇的头左右摇晃坐下去 |
|
|
3、对于物理世界中无法运动的物体,为其设置运动轨迹后,模型理解图片和运动指令后会生成运镜效果。
控制面板 | 输出结果 | 说明 |
|
因为凉亭在物理世界中很难实现平移所以运动轨迹会转变成镜头的运动路线 |
4、若希望避免模型生成运镜效果,需使用 “静态笔刷” 功能,涂抹后该区域像素将固定。
控制面板 | 输出结果 | 控制面板 | 输出结果 |
只有动态笔刷 | 只有动态笔刷+静态笔刷 | 只有动态笔刷 | 只有动态笔刷+静态笔刷 |
|
|
|
|
5、关于图像选区域的建议
(1)单个动态笔刷建议只选中类别一致的单个物体。
(2)单个动态笔刷只画一个相互联通的区域,避免选择相互分离的多个区域。
(3)静态笔刷可选中多个彼此不联通的区域,但每个独立选区内建议是同一类别。
6、关于运动轨迹的建议
轨迹曲线的方向和长度均会产生影响。假设轨迹曲线起点在选区内部,那么轨迹终点即为视频结束时物体停留的位置。
选中物体的中间运动过程会严格按照绘制的轨迹移动。
举例 | 控制面板 | 输出结果 |
1 |
|
|
2 |
|
还没有评论呢,快来抢沙发~