所有AI工具AI开发框架AI开源项目AI视频工具

LiveTalking开源项目 – 实时交互流式数字人技术

LiveTalking 是一个基于 PyTorch 框架的实时交互流式数字人项目,旨在实现音视频同步对话。它整合了 ER-NeRF、MuseTalk 和 Wav2Lip 等先进模型,利用神经辐射场技术,通过音频输入...

标签:

AI交流(进群备注:LiveTalking)

LiveTalking 是一个基于 PyTorch 框架的实时交互流式数字人项目,旨在实现音视频同步对话。它整合了 ER-NeRF、MuseTalk 和 Wav2Lip 等先进模型,利用神经辐射场技术,通过音频输入生成逼真的数字人表情和动作。项目支持声音克隆、数字人被打断、全身视频拼接等功能,适用于多种实时交互场景。

LiveTalking的特点:

  • 1. 支持多种数字人模型:ER-NeRF、MuseTalk、Wav2Lip、Ultralight-Digital-Human
  • 2. 支持声音克隆
  • 3. 支持打断数字人说话
  • 4. 支持全身视频拼接
  • 5. 支持 RTMP 和 WebRTC
  • 6. 支持视频编排:在数字人不说话时播放自定义视频
  • 7. 支持多并发

LiveTalking的功能:

  • 1. 实时音视频对话
  • 2. 数字人直播
  • 3. 虚拟主播
  • 4. 教育培训中的虚拟讲师
  • 5. 客户服务中的虚拟客服

相关导航

暂无评论

暂无评论...