🙋 对接metahuman-stream ，自定义GPT-SoVITS的模型

Ikaros-521 / AI-Vtuber

AI Vtuber是一个由【ChatterBot/ChatGPT/claude/langchain/chatglm/text-gen-webui/闻达/千问/kimi/ollama】驱动的虚拟主播【Live2D/UE/xuniren】，可以在【Bilibili/抖音/快手/微信视频号/拼多多/斗鱼/YouTube/twitch/TikTok】直播中与观众实时互动或直接在本地进行聊天。它使用TTS技术【edge-tts/VITS/elevenlabs/bark/bert-vits2/睿声】生成回答并可以选择【so-vits-svc/DDSP-SVC】变声；指令协同SD画图。

https://ikaros-521.github.io/Luna-Docs/site/

GNU General Public License v3.0

2.8k stars 430 forks source link

🙋 对接metahuman-stream ，自定义GPT-SoVITS的模型 #943

Closed Ikaros-521 closed 1 month ago

Ikaros-521 commented 1 month ago

操作系统

Windows

Python 版本

3.10.11

AI Vtuber 版本

20240726

描述问题

如题

复现步骤

期望的结果

No response

截图或日志

No response

Ikaros-521 commented 1 month ago

对接metahuman-stream ，自定义GPT-SoVITS的模型，修改metahuman-stream源码追加配置文件参数，参考图1，yaml内容参考图2，pth模型路径。另外其对接GSV时合成确实慢，换GPU还是慢，再说吧，参考图3改了指定device 0VE$7UQE~8KB%B`HBZ%ANE7 (AM5FXIJ})8I%FN~SI)5PL1 DYV9U1 IL6PB O(`Q{@%T3L