首页 > 新闻资讯内容详情

腾讯联手多所大学推出StyleCrafter 可用于视频模型训练 2023-12-04 16:53:00

  【CNMO新闻】近日,根据品玩报道,腾讯 AI 实验室近日联手清华大学和香港中文大学,共同推出一种名为 StyleCrafter 的通用方法,可帮助通过风格控制适配器增强预练习的视频天生模型。

腾讯联手多所大学推出StyleCrafter 可用于视频模型训练

  论文表示,依靠 StyleCrafter ,模型可以根据参考图像天生不同风格的视频。为了促进内收留与风格的分离,研究团队删除了文本提示中的风格描述,并使用解耦学习策略仅从参考图像中提取风格信息。研究团队还设计了一个规模自适应融合模块,以平衡基于文本的内收留特征和基于图像的风格特征的影响,这有助于在各种文本和风格组合中实现泛化。

  实验显示,StyleCrafter 能高效天生高质量的风格化视频,这些视频既与文本内收留一致,又与参考图像的风格相似。

相关标签: StyleCrafter 视频模型训练

发布评论