适合类型:情感、书单、小说、电影解说 纪录片。声音特点 :磁性浑厚,朗朗动听
模型配音效果
鉴于GPT-SOVITS模型自回归特性,即其配音情绪高度依赖于所提供的参考音频,特此说明:本视频所展示的配音情绪仅为采用某一特定参考音频时的效果示例,并不全面反映GPT-SOVITS模型能够生成的全部情绪范围及最终配音质量的上限。模型的最终表现将随着不同参考音频的输入而展现出多样化。
训练日志
2024-07-25 10:11:56,335 魔凌峰(电影解说) INFO {'train': {'log_interval': 100, 'eval_interval': 500, 'seed': 1234, 'epochs': 20, 'learning_rate': 0.0001, 'betas': [0.8, 0.99], 'eps': 1e-09, 'batch_size': 4, 'fp16_run': True, 'lr_decay': 0.999875, 'segment_size': 20480, 'init_lr_ratio': 1, 'warmup_epochs': 0, 'c_mel': 45, 'c_kl': 1.0, 'text_low_lr_rate': 0.4, 'pretrained_s2G': 'GPT_SoVITS/pretrained_models/s2G488k.pth', 'pretrained_s2D': 'GPT_SoVITS/pretrained_models/s2D488k.pth', 'if_save_latest': True, 'if_save_every_weights': True, 'save_every_epoch': 20, 'gpu_numbers': '0'}, 'data': {'max_wav_value': 32768.0, 'sampling_rate': 32000, 'filter_length': 2048, 'hop_length': 640, 'win_length': 2048, 'n_mel_channels': 128, 'mel_fmin': 0.0, 'mel_fmax': None, 'add_blank': True, 'n_speakers': 300, 'cleaned_text': True, 'exp_dir': 'logs/魔凌峰(电影解说)'}, 'model': {'inter_channels': 192, 'hidden_channels': 192, 'filter_channels': 768, 'n_heads': 2, 'n_layers': 6, 'kernel_size': 3, 'p_dropout': 0.1, 'resblock': '1', 'resblock_kernel_sizes': [3, 7, 11], 'resblock_dilation_sizes': [[1, 3, 5], [1, 3, 5], [1, 3, 5]], 'upsample_rates': [10, 8, 2, 2, 2], 'upsample_initial_channel': 512, 'upsample_kernel_sizes': [16, 16, 8, 2, 2], 'n_layers_q': 3, 'use_spectral_norm': False, 'gin_channels': 512, 'semantic_frame_rate': '25hz', 'freeze_quantizer': True}, 's2_ckpt_dir': 'logs/魔凌峰(电影解说)', 'content_module': 'cnhubert', 'save_weight_dir': 'SoVITS_weights', 'name': '魔凌峰(电影解说)', 'pretrain': None, 'resume_step': None}
2024-07-25 10:11:57,278 魔凌峰(电影解说) INFO loaded pretrained GPT_SoVITS/pretrained_models/s2G488k.pth
2024-07-25 10:11:57,430 魔凌峰(电影解说) INFO loaded pretrained GPT_SoVITS/pretrained_models/s2D488k.pth
2024-07-25 10:12:16,724 魔凌峰(电影解说) INFO Train Epoch: 1 [0%]
2024-07-25 10:12:16,730 魔凌峰(电影解说) INFO [2.3697752952575684, 2.5508294105529785, 12.41741943359375, 19.89195442199707, 0.0, 2.1232266426086426, 0, 9.99875e-05]
2024-07-25 10:14:46,784 魔凌峰(电影解说) INFO {'train': {'log_interval': 100, 'eval_interval': 500, 'seed': 1234, 'epochs': 20, 'learning_rate': 0.0001, 'betas': [0.8, 0.99], 'eps': 1e-09, 'batch_size': 3, 'fp16_run': True, 'lr_decay': 0.999875, 'segment_size': 20480, 'init_lr_ratio': 1, 'warmup_epochs': 0, 'c_mel': 45, 'c_kl': 1.0, 'text_low_lr_rate': 0.4, 'pretrained_s2G': 'GPT_SoVITS/pretrained_models/s2G488k.pth', 'pretrained_s2D': 'GPT_SoVITS/pretrained_models/s2D488k.pth', 'if_save_latest': True, 'if_save_every_weights': True, 'save_every_epoch': 20, 'gpu_numbers': '0'}, 'data': {'max_wav_value': 32768.0, 'sampling_rate': 32000, 'filter_length': 2048, 'hop_length': 640, 'win_length': 2048, 'n_mel_channels': 128, 'mel_fmin': 0.0, 'mel_fmax': None, 'add_blank': True, 'n_speakers': 300, 'cleaned_text': True, 'exp_dir': 'logs/魔凌峰(电影解说)'}, 'model': {'inter_channels': 192, 'hidden_channels': 192, 'filter_channels': 768, 'n_heads': 2, 'n_layers': 6, 'kernel_size': 3, 'p_dropout': 0.1, 'resblock': '1', 'resblock_kernel_sizes': [3, 7, 11], 'resblock_dilation_sizes': [[1, 3, 5], [1, 3, 5], [1, 3, 5]], 'upsample_rates': [10, 8, 2, 2, 2], 'upsample_initial_channel': 512, 'upsample_kernel_sizes': [16, 16, 8, 2, 2], 'n_layers_q': 3, 'use_spectral_norm': False, 'gin_channels': 512, 'semantic_frame_rate': '25hz', 'freeze_quantizer': True}, 's2_ckpt_dir': 'logs/魔凌峰(电影解说)', 'content_module': 'cnhubert', 'save_weight_dir': 'SoVITS_weights', 'name': '魔凌峰(电影解说)', 'pretrain': None, 'resume_step': None}
2024-07-25 10:14:47,732 魔凌峰(电影解说) INFO loaded pretrained GPT_SoVITS/pretrained_models/s2G488k.pth
2024-07-25 10:14:47,885 魔凌峰(电影解说) INFO loaded pretrained GPT_SoVITS/pretrained_models/s2D488k.pth
2024-07-25 10:15:05,205 魔凌峰(电影解说) INFO Train Epoch: 1 [0%]
2024-07-25 10:15:05,206 魔凌峰(电影解说) INFO [2.5224595069885254, 2.356765031814575, 10.465615272521973, 19.567157745361328, 0.0, 2.3902854919433594, 0, 9.99875e-05]
2024-07-25 10:15:37,846 魔凌峰(电影解说) INFO ====> Epoch: 1
2024-07-25 10:15:58,839 魔凌峰(电影解说) INFO Train Epoch: 2 [72%]
2024-07-25 10:15:58,846 魔凌峰(电影解说) INFO [2.708801507949829, 2.174637794494629, 7.827678203582764, 14.748069763183594, 0.0, 1.6928422451019287, 100, 9.99750015625e-05]
2024-07-25 10:16:06,347 魔凌峰(电影解说) INFO ====> Epoch: 2
2024-07-25 10:16:33,125 魔凌峰(电影解说) INFO ====> Epoch: 3
2024-07-25 10:16:46,532 魔凌峰(电影解说) INFO Train Epoch: 4 [45%]
2024-07-25 10:16:46,539 魔凌峰(电影解说) INFO [2.581094741821289, 2.624117374420166, 10.218055725097656, 16.154766082763672, 0.0, 1.63624107837677, 200, 9.995000937421877e-05]
2024-07-25 10:17:00,614 魔凌峰(电影解说) INFO ====> Epoch: 4
2024-07-25 10:17:27,276 魔凌峰(电影解说) INFO ====> Epoch: 5
2024-07-25 10:17:32,948 魔凌峰(电影解说) INFO Train Epoch: 6 [17%]
2024-07-25 10:17:32,955 魔凌峰(电影解说) INFO [2.341472864151001, 2.754849433898926, 10.988697052001953, 18.650794982910156, 0.0, 1.5467170476913452, 300, 9.99250234335941e-05]
2024-07-25 10:17:52,670 魔凌峰(电影解说) INFO ====> Epoch: 6
2024-07-25 10:18:15,683 魔凌峰(电影解说) INFO Train Epoch: 7 [90%]
2024-07-25 10:18:15,692 魔凌峰(电影解说) INFO [2.290830135345459, 2.9228150844573975, 10.765771865844727, 18.26449203491211, 0.0, 1.7121729850769043, 400, 9.991253280566489e-05]
2024-07-25 10:18:18,019 魔凌峰(电影解说) INFO ====> Epoch: 7
2024-07-25 10:18:43,011 魔凌峰(电影解说) INFO ====> Epoch: 8
2024-07-25 10:18:59,341 魔凌峰(电影解说) INFO Train Epoch: 9 [62%]
2024-07-25 10:18:59,350 魔凌峰(电影解说) INFO [2.040083408355713, 3.1991560459136963, 11.157970428466797, 17.488656997680664, 0.0, 1.1007933616638184, 500, 9.98875562335968e-05]
2024-07-25 10:19:08,755 魔凌峰(电影解说) INFO ====> Epoch: 9
2024-07-25 10:19:34,026 魔凌峰(电影解说) INFO ====> Epoch: 10
2024-07-25 10:19:43,902 魔凌峰(电影解说) INFO Train Epoch: 11 [34%]
2024-07-25 10:19:43,909 魔凌峰(电影解说) INFO [1.8445606231689453, 3.134744644165039, 12.176704406738281, 17.98443031311035, 0.0, 1.4170395135879517, 600, 9.986258590528146e-05]
2024-07-25 10:19:59,671 魔凌峰(电影解说) INFO ====> Epoch: 11
2024-07-25 10:20:24,791 魔凌峰(电影解说) INFO ====> Epoch: 12
2024-07-25 10:20:27,671 魔凌峰(电影解说) INFO Train Epoch: 13 [7%]
2024-07-25 10:20:27,678 魔凌峰(电影解说) INFO [2.66642165184021, 2.1234664916992188, 8.028155326843262, 14.97747802734375, 0.0, 1.4841612577438354, 700, 9.983762181915804e-05]
2024-07-25 10:20:50,438 魔凌峰(电影解说) INFO ====> Epoch: 13
2024-07-25 10:21:10,949 魔凌峰(电影解说) INFO Train Epoch: 14 [79%]
2024-07-25 10:21:10,959 魔凌峰(电影解说) INFO [2.963160514831543, 2.7412078380584717, 7.696903705596924, 13.752401351928711, 0.0, 1.6457085609436035, 800, 9.982514211643064e-05]
2024-07-25 10:21:15,820 魔凌峰(电影解说) INFO ====> Epoch: 14
2024-07-25 10:21:40,939 魔凌峰(电影解说) INFO ====> Epoch: 15
2024-07-25 10:21:54,857 魔凌峰(电影解说) INFO Train Epoch: 16 [52%]
2024-07-25 10:21:54,861 魔凌峰(电影解说) INFO [2.438293695449829, 2.428629159927368, 9.238004684448242, 16.615394592285156, 0.0, 0.6100670695304871, 900, 9.980018739066937e-05]
2024-07-25 10:22:06,307 魔凌峰(电影解说) INFO ====> Epoch: 16
2024-07-25 10:22:31,549 魔凌峰(电影解说) INFO ====> Epoch: 17
2024-07-25 10:22:38,738 魔凌峰(电影解说) INFO Train Epoch: 18 [24%]
2024-07-25 10:22:38,743 魔凌峰(电影解说) INFO [1.9022531509399414, 3.0719244480133057, 12.498734474182129, 18.54442596435547, 0.0, 1.1987608671188354, 1000, 9.977523890319963e-05]
2024-07-25 10:22:57,221 魔凌峰(电影解说) INFO ====> Epoch: 18
2024-07-25 10:23:22,369 魔凌峰(电影解说) INFO Train Epoch: 19 [97%]
2024-07-25 10:23:22,374 魔凌峰(电影解说) INFO [2.478604555130005, 3.1216282844543457, 10.930227279663086, 18.737524032592773, 0.0, 1.298490285873413, 1100, 9.976276699833672e-05]
2024-07-25 10:23:23,077 魔凌峰(电影解说) INFO ====> Epoch: 19
2024-07-25 10:23:48,452 魔凌峰(电影解说) INFO Saving model and optimizer state at iteration 20 to logs/魔凌峰(电影解说)/logs_s2\G_233333333333.pth
2024-07-25 10:23:49,093 魔凌峰(电影解说) INFO Saving model and optimizer state at iteration 20 to logs/魔凌峰(电影解说)/logs_s2\D_233333333333.pth
2024-07-25 10:23:49,874 魔凌峰(电影解说) INFO saving ckpt 魔凌峰(电影解说)_e20:Success.
2024-07-25 10:23:49,874 魔凌峰(电影解说) INFO ====> Epoch: 20
如何使用配音模型
1,gpt-sovits模型本地部署(适合有显卡的用户)
2,gpt-sovits模型云端部署
https://aiaf.cc/gpt-sovits-yunduan/
如果您想一对一远程教学模型安装、模型训练,请联系微信 xiaoming1870
声音版权使用声明
本网站所展示的AI声音模型,源自站长及AI模型工作室的精心创作与提供。我们秉持非商业性使用的原则,仅以此平台作为娱乐非商业使用,同时,我们高度重视并严格遵守版权所有者的合法权益。特此声明,我们未获得亦不声称拥有这些声音模型的任何直接使用权或授权。
对于因模型整理、发布、声音转换效果制作及视频教学制作而产生的相关费用,我们明确其仅覆盖上述服务成本,绝不包含对模型版权本身的任何收费。我们承诺,所有活动均在法律框架内进行,尊重版权,合理且合法地使用与分享这些宝贵的AI声音资源。
若您对上述模型或我们的服务存在任何疑问、需要进一步的版权信息,或是有任何宝贵的建议与反馈,我们诚挚邀请您随时与我们取得联系。我们期待与您共同探讨,促进AI声音艺术的健康发展与尊重版权的良好氛围。
重要提示:在利用AI声音模型进行任何活动之前,我们强烈建议您深入了解并遵守相关版权与知识产权法律法规,确保您的行为合法且合规,共同维护良好的创作生态。
请登录后查看评论内容