AI 软件

Boximator:字节研究院发布一种用于精细运动控制的新方法。

文 :管理员 来源 :网络 阅读 :304 6月前

Boximator

Github:https://boximator.github.io/

Boximator:字节研究院发布一种用于精细运动控制的新方法。

字节研究院发布了一个名为 Boximator 的视频控制方式,看起来相当不错。这种控制方式允许用户选择需要运动的物体,并绘制其结束位置和运动路径,物体将严格按照用户绘制的位置和路径进行运动。与Runway的运动笔刷相比,Boximator 可以更精确地控制物体的运动结束位置。

Boximator:字节研究院发布一种用于精细运动控制的新方法。


Boximator 采用了硬性约束和软性约束两种约束机制。用户可以通过硬性约束选择视频中特定对象的条件帧,并通过这两种约束方式来指定该对象在未来画面中的位置、形状或运动轨迹。Boximator 可以作为现有视频合成模型的一个附加组件。


Boximator:字节研究院发布一种用于精细运动控制的新方法。


在训练过程中,为了保留原模型的知识,研究院选择冻结了原始权重,只对控制模块进行训练。引入创新的自我追踪技术,简化了学习框选对象与其关联的过程。

实验证明,Boximator在视频质量方面达到了行业领先水平,相较于基础模型有所提升,并在引入框选约束后进一步增强了效果,用户更喜欢Boximator生成的视频效果,而不是基础模型的输出。

点赞

3

免责声明
  • 本站提供的所有内容仅供学习、分享、交流,如有侵犯您的合法权益,请联系我们处理。本站所有留言、评论属于内容发布者,与本站观点及立场无关!

随机推荐

注册表大法!教你如何给 Win11 开启传统右键菜单
« 上一篇 11-13
Clarity AI:免费开源的AI无损图片放大图像升级器和增强工具
下一篇 » 04-09

评论

共0条评论
  • 这篇文章评论空空如也,赶紧来抢沙发吧~


© 2021-2027 Powered By YzmCMS
蜀ICP备 2021015236 号
相关侵权、投诉及建议等,请发E-mail:1476705828@qq.com

友情链接: YzmCMS官方网站 YzmCMS博客