DreamVVT – 字节联合清华推出的视频虚拟试穿技术

DreamVVT是什么

DreamVVT 是字节跳动和清华大学（深圳）联合推出的视频虚拟试穿（Video Virtual Try-On, VVT）技术，基于扩散 Transformer（DiTs）框架，通过两阶段方法实现高保真且时间连贯的虚拟试穿效果。第一阶段从输入视频中采样关键帧，结合视觉语言模型（VLM）生成语义一致的试穿图像；第二阶段利用骨骼图和运动信息，结合预训练视频生成模型，确保视频的动态连贯性。DreamVVT 能在复杂动作和场景下保留服装细节，支持整套穿搭的试穿，可以为卡通角色穿戴真实服装。

DreamVVT的主要功能

• 高保真虚拟试穿：能在视频中实现高保真度的服装试穿效果，保留服装的细节和纹理，即使在复杂动作和场景下也能保持高质量的视觉效果。