MuseTalk 快速上手
语言模型与 TTS 都使用云端 API，2D 数字人使用 MuseTalk 进行推理，默认使用 GPU 进行推理，暂不支持 CPU 推理。
使用的 Handler
| 类别 | Handler | 安装说明 |
|---|---|---|
| Client | client/rtc_client/client_handler_rtc | RTC Client |
| VAD | vad/silerovad/vad_handler/silero | |
| ASR | asr/sensevoice/asr_handler_sensevoice | |
| LLM | llm/openai_compatible/llm_handler/llm_handler_openai_compatible | OpenAI 兼容 |
| TTS | tts/bailian_tts/tts_handler_cosyvoice_bailian | 百炼 CosyVoice |
| Avatar | avatar/musetalk/avatar_handler_musetalk | MuseTalk |
快速开始
bash
# 1. 安装依赖
uv run install.py --config config/chat_with_openai_compatible_bailian_cosyvoice_musetalk.yaml
# 2. 下载模型
uv run scripts/download_models.py --handler musetalk
# 3. 启动
uv run src/demo.py --config config/chat_with_openai_compatible_bailian_cosyvoice_musetalk.yaml