擅长领域: 情感,成长,影视,温柔细腻,自然动听
GPT-SOVITS模型配音效果
鉴于GPT-SOVITS模型自回归特性,即其配音情绪高度依赖于所提供的参考音频,特此说明:本视频所展示的配音情绪仅为采用某一特定参考音频时的效果示例,并不全面反映GPT-SOVITS模型能够生成的全部情绪范围及最终配音质量的上限。模型的最终表现将随着不同参考音频的输入而展现出多样化。
模型下载
训练日志
2024-08-18 08:51:19,506 aiaf.cc情感 成长女声 INFO {'train': {'log_interval': 100, 'eval_interval': 500, 'seed': 1234, 'epochs': 20, 'learning_rate': 0.0001, 'betas': [0.8, 0.99], 'eps': 1e-09, 'batch_size': 11, 'fp16_run': True, 'lr_decay': 0.999875, 'segment_size': 20480, 'init_lr_ratio': 1, 'warmup_epochs': 0, 'c_mel': 45, 'c_kl': 1.0, 'text_low_lr_rate': 0.4, 'pretrained_s2G': 'GPT_SoVITS/pretrained_models/gsv-v2final-pretrained/s2G2333k.pth', 'pretrained_s2D': 'GPT_SoVITS/pretrained_models/gsv-v2final-pretrained/s2D2333k.pth', 'if_save_latest': True, 'if_save_every_weights': True, 'save_every_epoch': 20, 'gpu_numbers': '0'}, 'data': {'max_wav_value': 32768.0, 'sampling_rate': 32000, 'filter_length': 2048, 'hop_length': 640, 'win_length': 2048, 'n_mel_channels': 128, 'mel_fmin': 0.0, 'mel_fmax': None, 'add_blank': True, 'n_speakers': 300, 'cleaned_text': True, 'exp_dir': 'logs/aiaf.cc情感 成长女声'}, 'model': {'inter_channels': 192, 'hidden_channels': 192, 'filter_channels': 768, 'n_heads': 2, 'n_layers': 6, 'kernel_size': 3, 'p_dropout': 0.1, 'resblock': '1', 'resblock_kernel_sizes': [3, 7, 11], 'resblock_dilation_sizes': [[1, 3, 5], [1, 3, 5], [1, 3, 5]], 'upsample_rates': [10, 8, 2, 2, 2], 'upsample_initial_channel': 512, 'upsample_kernel_sizes': [16, 16, 8, 2, 2], 'n_layers_q': 3, 'use_spectral_norm': False, 'gin_channels': 512, 'semantic_frame_rate': '25hz', 'freeze_quantizer': True, 'version': 'v2'}, 's2_ckpt_dir': 'logs/aiaf.cc情感 成长女声', 'content_module': 'cnhubert', 'save_weight_dir': 'SoVITS_weights_v2', 'name': 'aiaf.cc情感 成长女声', 'version': 'v2', 'pretrain': None, 'resume_step': None}
2024-08-18 08:51:21,051 aiaf.cc情感 成长女声 INFO loaded pretrained GPT_SoVITS/pretrained_models/gsv-v2final-pretrained/s2G2333k.pth
2024-08-18 08:51:21,247 aiaf.cc情感 成长女声 INFO loaded pretrained GPT_SoVITS/pretrained_models/gsv-v2final-pretrained/s2D2333k.pth
2024-08-18 08:51:55,123 aiaf.cc情感 成长女声 INFO Train Epoch: 1 [0%]
2024-08-18 08:51:55,124 aiaf.cc情感 成长女声 INFO [3.0257935523986816, 1.405439019203186, 9.134356498718262, 20.538755416870117, 0.0, 2.3152737617492676, 0, 9.99875e-05]
2024-08-18 08:52:19,073 aiaf.cc情感 成长女声 INFO ====> Epoch: 1
2024-08-18 08:52:42,308 aiaf.cc情感 成长女声 INFO ====> Epoch: 2
2024-08-18 08:53:04,876 aiaf.cc情感 成长女声 INFO ====> Epoch: 3
2024-08-18 08:53:09,763 aiaf.cc情感 成长女声 INFO Train Epoch: 4 [12%]
2024-08-18 08:53:09,763 aiaf.cc情感 成长女声 INFO [2.3251454830169678, 2.833252191543579, 10.792845726013184, 20.121414184570312, 0.0, 1.389656901359558, 100, 9.995000937421877e-05]
2024-08-18 08:53:26,824 aiaf.cc情感 成长女声 INFO ====> Epoch: 4
2024-08-18 08:53:48,334 aiaf.cc情感 成长女声 INFO ====> Epoch: 5
2024-08-18 08:54:10,634 aiaf.cc情感 成长女声 INFO ====> Epoch: 6
2024-08-18 08:54:19,366 aiaf.cc情感 成长女声 INFO Train Epoch: 7 [25%]
2024-08-18 08:54:19,366 aiaf.cc情感 成长女声 INFO [2.5820374488830566, 2.228302240371704, 10.20122241973877, 19.116819381713867, 0.0, 1.8585671186447144, 200, 9.991253280566489e-05]
2024-08-18 08:54:33,283 aiaf.cc情感 成长女声 INFO ====> Epoch: 7
2024-08-18 08:54:54,989 aiaf.cc情感 成长女声 INFO ====> Epoch: 8
2024-08-18 08:55:16,711 aiaf.cc情感 成长女声 INFO ====> Epoch: 9
2024-08-18 08:55:26,659 aiaf.cc情感 成长女声 INFO Train Epoch: 10 [38%]
2024-08-18 08:55:26,660 aiaf.cc情感 成长女声 INFO [2.4198567867279053, 2.223647117614746, 11.771075248718262, 20.479900360107422, 0.0, 1.4062496423721313, 300, 9.987507028906759e-05]
2024-08-18 08:55:38,269 aiaf.cc情感 成长女声 INFO ====> Epoch: 10
2024-08-18 08:55:59,719 aiaf.cc情感 成长女声 INFO ====> Epoch: 11
2024-08-18 08:56:21,663 aiaf.cc情感 成长女声 INFO ====> Epoch: 12
2024-08-18 08:56:35,277 aiaf.cc情感 成长女声 INFO Train Epoch: 13 [50%]
2024-08-18 08:56:35,277 aiaf.cc情感 成长女声 INFO [2.39642333984375, 2.9369518756866455, 10.344181060791016, 19.409320831298828, 0.0, 1.5136531591415405, 400, 9.983762181915804e-05]
2024-08-18 08:56:44,628 aiaf.cc情感 成长女声 INFO ====> Epoch: 13
2024-08-18 08:57:08,441 aiaf.cc情感 成长女声 INFO ====> Epoch: 14
2024-08-18 08:57:30,647 aiaf.cc情感 成长女声 INFO ====> Epoch: 15
2024-08-18 08:57:46,163 aiaf.cc情感 成长女声 INFO Train Epoch: 16 [62%]
2024-08-18 08:57:46,163 aiaf.cc情感 成长女声 INFO [2.6955673694610596, 2.4170100688934326, 7.8475189208984375, 18.277984619140625, 0.0, 1.4204351902008057, 500, 9.980018739066937e-05]
2024-08-18 08:57:53,288 aiaf.cc情感 成长女声 INFO ====> Epoch: 16
2024-08-18 08:58:15,778 aiaf.cc情感 成长女声 INFO ====> Epoch: 17
2024-08-18 08:58:38,799 aiaf.cc情感 成长女声 INFO ====> Epoch: 18
2024-08-18 08:58:57,209 aiaf.cc情感 成长女声 INFO Train Epoch: 19 [75%]
2024-08-18 08:58:57,210 aiaf.cc情感 成长女声 INFO [2.3875484466552734, 2.753446578979492, 11.720982551574707, 19.151817321777344, 0.0, 1.7306822538375854, 600, 9.976276699833672e-05]
2024-08-18 08:59:01,914 aiaf.cc情感 成长女声 INFO ====> Epoch: 19
2024-08-18 08:59:24,799 aiaf.cc情感 成长女声 INFO Saving model and optimizer state at iteration 20 to logs/aiaf.cc情感 成长女声/logs_s2\G_233333333333.pth
2024-08-18 08:59:25,710 aiaf.cc情感 成长女声 INFO Saving model and optimizer state at iteration 20 to logs/aiaf.cc情感 成长女声/logs_s2\D_233333333333.pth
2024-08-18 08:59:27,609 aiaf.cc情感 成长女声 INFO saving ckpt aiaf.cc情感 成长女声_e20:Success.
2024-08-18 08:59:27,609 aiaf.cc情感 成长女声 INFO ====> Epoch: 20
如何使用配音模型
1,gpt-sovits模型本地部署(适合有显卡的用户)
2,gpt-sovits模型云端部署
https://aiaf.cc/gpt-sovits-yunduan/
如果您想一对一远程教学模型安装、模型训练,请联系微信 xiaoming1870
声音版权使用声明
本网站所展示的AI声音模型,源自站长及AI模型工作室的精心创作与提供。我们秉持非商业性使用的原则,仅以此平台作为娱乐非商业使用,同时,我们高度重视并严格遵守版权所有者的合法权益。特此声明,我们未获得亦不声称拥有这些声音模型的任何直接使用权或授权。
对于因模型整理、发布、声音转换效果制作及视频教学制作而产生的相关费用,我们明确其仅覆盖上述服务成本,绝不包含对模型版权本身的任何收费。我们承诺,所有活动均在法律框架内进行,尊重版权,合理且合法地使用与分享这些宝贵的AI声音资源。
若您对上述模型或我们的服务存在任何疑问、需要进一步的版权信息,或是有任何宝贵的建议与反馈,我们诚挚邀请您随时与我们取得联系。我们期待与您共同探讨,促进AI声音艺术的健康发展与尊重版权的良好氛围。
重要提示:在利用AI声音模型进行任何活动之前,我们强烈建议您深入了解并遵守相关版权与知识产权法律法规,确保您的行为合法且合规,共同维护良好的创作生态。
请登录后查看评论内容