所有AI工具AI开发框架AI开源项目AI视频工具

FollowYourPose开源项目 – 图生视频模型,人物跟随动作生成视频

FollowYourPose是由腾讯混元团队联合中山大学、香港科技大学推出的图生视频模型。该模型通过输入一张人物图片和一段动作视频,能够生成人物跟随动作的视频,视频长度可达10秒。项...

标签:

AI交流(进群备注:FollowYourPose)

FollowYourPose是由腾讯混元团队联合中山大学、香港科技大学推出的图生视频模型。该模型通过输入一张人物图片和一段动作视频,能够生成人物跟随动作的视频,视频长度可达10秒。项目基于Stable Diffusion模型,通过两阶段训练方案,利用图像-姿态对和无姿态视频数据集,生成可编辑和姿态可控的人物视频。项目代码和模型已公开,支持在本地和云端运行。

FollowYourPose的特点:

  • 1. 支持输入图片和动作视频生成人物跟随动作的视频
  • 2. 基于Stable Diffusion模型,生成高质量视频
  • 3. 两阶段训练方案,利用图像-姿态对和无姿态视频数据集
  • 4. 支持本地和云端运行,提供Gradio和Hugging Face演示
  • 5. 生成视频长度可达10秒,支持多种人物和场景

FollowYourPose的功能:

  • 1. 输入一张人物图片和一段动作视频,生成人物跟随动作的视频
  • 2. 在本地运行Gradio演示,生成自定义视频
  • 3. 使用Hugging Face Spaces进行在线演示和生成
  • 4. 通过Colab Notebook快速体验模型功能
  • 5. 下载预训练模型和代码,进行自定义训练和推理

相关导航

暂无评论

暂无评论...