Threads (@easyaitw.online)
ai-toolslocal-llm
Original source

AI賽博女友 — LiveTalking on Pure Windows 11 (Non-WSL)

Summary

@easyaitw.online 分享在純 Windows 11 上(非 WSL 環境)成功跑起 AI 賽博女友的成果。底層架構是 LiveTalking + HuggingFace speech-to-speech pipeline。

Components Required

完整 pipeline 由以下模組組成:

  1. ASR(語音識別) — 將使用者語音轉為文字
  2. LLM(大語言模型) — 生成對話回覆(支援 Qwen 等,透過 OpenAI-compatible API)
  3. TTS(語音合成) — 將 AI 回覆轉為語音(支援 EdgeTTS、GPT-SoVITS、CosyVoice 等)
  4. wav2lip / MuseTalk — 即時口型同步驅動數位人頭像

Hardware Requirements

  • GPU: RTX 3060+ (wav2lip), RTX 3080 Ti+ (MuseTalk)
  • Python 3.12, PyTorch 2.9.1, CUDA 12.8
  • 模型需另外下載(wav2lip256.pth 等)

Output Options

  • WebRTC(瀏覽器)
  • RTMP(直播到 Bilibili/YouTube)
  • Virtual Camera

Windows Setup

  • 官方支援 Linux / Windows / Mac
  • Windows 整合包下載:https://pan.quark.cn/s/a040bf5cb065
  • 純 Win11 原生跑需自行處理 ffmpeg 路徑、CUDA 版本對應、PowerShell 編譯等問題
  • WSL 方便很多 — 直接用 Linux 環境一鍵安裝依賴即可
  • HeiXia2077/live-avatar 提供 Windows 一鍵啟動腳本

Discussion Highlights

  • meta.ai bot 在回覆中解釋了架構:ASR + LLM + TTS + wav2lip
  • 有人已改寫成可自訂上傳聲音和女友影像的版本
  • 有人建議做成手機 App 可能是商業模式