您现在的位置是:深度 >>正文
字节发布视频控制方式Boximator 比Runway运动笔刷更精确
深度89382人已围观
简介CSS站长资源ChinaZ.com)2月6日 消息:字节研究院发布了一个名为Boximator的视频控制方式,看起来相当不错。这种控制方式允许用户选择需要运动的物体,并绘制其结束位置和运动路径,物体将 ...
CSS站长资源(ChinaZ.com)2月6日 消息:字节研究院发布了一个名为Boximator的字节视频控制方式,看起来相当不错。发布方式这种控制方式允许用户选择需要运动的视频物体,并绘制其结束位置和运动路径,控制物体将严格按照用户绘制的比笔刷位置和路径进行运动。与Runway的运动运动笔刷相比,Boximator可以更精确地控制物体的更精运动结束位置。
项目地址:https://top.aibase.com/tool/boximator
Boximator采用了硬性约束和软性约束两种约束机制。字节用户可以通过硬性约束选择视频中特定对象的发布方式条件帧,并通过这两种约束方式来指定该对象在未来画面中的视频位置、形状或运动轨迹。控制Boximator可以作为现有视频合成模型的比笔刷一个附加组件。
在训练过程中,运动为了保留原模型的更精知识,研究院选择冻结了原始权重,字节只对控制模块进行训练。引入创新的自我追踪技术,简化了学习框选对象与其关联的过程。
实验证明,Boximator在视频质量方面达到了行业领先水平,相较于基础模型有所提升,并在引入框选约束后进一步增强了效果。人类评估显示,用户更喜欢Boximator生成的视频效果,而不是基础模型的输出。
Tags:
相关文章
亚马逊开发名为Rufus的AI购物助手,帮用户购物
深度划重点:- 亚马逊推出了名为 Rufus 的 AI 购物助手,它可以帮助用户进行购物决策- Rufus 通过对亚马逊产品库、用户评价和网页信息的学习,可以回答用户关于产品的问题、提供比较和建议等- R ...
【深度】
阅读更多支持百亿参数大模型、卢伟冰现场官宣小米首发,高通骁龙8s Gen3发布
深度高通又往中高端手机市场扔下一颗「重磅炸弹」。高通最强手机芯片骁龙8Gen3迎来了一款与它同源的「旗舰级」产品。3月18日,高通正式推出了第三代骁龙8s 移动平台骁龙8s Gen3),凭借旗舰级的 CP ...
【深度】
阅读更多Suno官网体验入口 AI音乐语音创作工具免费下载地址
深度Suno AI是一款通过人工智能创作音乐和语音的产品。它利用先进的算法和数据模型,能够生成高质量的音乐和语音作品。Suno AI具有以下功能和优势:1. 创作多种风格的音乐,包括流行、古典、电子等;2 ...
【深度】
阅读更多