Skip to content

关于GPT-SoVITS中v3和v4版本的不支持ref_free问题 #2330

New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

Sign up for GitHub

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Jump to bottom
Closed
zazachao opened this issue Apr 27, 2025 · 3 comments
Closed

关于GPT-SoVITS中v3和v4版本的不支持ref_free问题 #2330

zazachao opened this issue Apr 27, 2025 · 3 comments

Comments

@zazachao
Copy link

1、为什么v3和v4版本不支持ref_free？GPT预测的是all_phoneme对应的语义token，然后通过idx进行截断获取target_text对应的语义token，那是不是可以进行ref_free修改呢，不传入prompt_text，以及设置prompt为空，也不进行通过idx截断，GPT预测返回的就全是target_text对应的语义token。这样做也可以实现ref_free。
2、v3版本和v4版本不支持ref_free这样做的考虑是什么？如果在训练数据中，长音频数据比较少，训练出来的GPT在推理的时候是不是在ref_free的情况下更稳定呢。
@XXXXRT666
Copy link
Contributor

CFM

@zazachao
Copy link
Author

刚刚看了一下，确实如果使用CFM进行mel生成的话，需要prompt_text。

@RVC-Boss
Copy link
Owner

因为发v3v4的主要原因是cfm的参考音频部分能引导后续生成的音频的音色大幅接近参考音色
如果不用ref，那v3v4发布就没有意义了，应该去用v1v2

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Assignees
No one assigned
Labels
None yet
Projects
None yet
Milestone
No milestone
Development

No branches or pull requests
3 participants
@zazachao @RVC-Boss @XXXXRT666