GPT-SOVITS模型|星瞳声音配音模型 星瞳AI配音模型

介绍

星瞳是活跃在Bilibili的虚拟歌手、虚拟UP主，也是QQ炫舞系列虚拟代言人看板娘、中国首个虚拟时尚博主、李宁潮流星推官、Levi’s虚拟代言人、make up for ever艺术潮妆大使、长沙首位非遗文旅推广大使和孔雀舞流行化演绎的传承者。什么斜杠青年 星瞳的工具人账号名称为@星瞳工具人_official，用于发布星瞳的直播日历（2022年开始）和官方公告（如二创大赛）等。

VUP化早期的星瞳还属于较为纯良的一派，但经过一年多的洗礼已经变得很抽象了，看自己一年前的视频能抠出三室一厅。[68]
2D直播由于没有3D直播那样的动作需求，相对而言会更加容易吐露心声。
因2060节目关系，与七海结识并关系良好。
由于身份特殊，直播间内经常会开关于马化腾的玩笑。
在2022年7月14日发售的单机游戏《生死轮回》中，星瞳以彩蛋的形式作为城市的背景全息影像客串出现在游戏中。[69]
与扇宝，安可并称腾讯三公主。

gpt-sovits模型配音效果

鉴于GPT-SOVITS模型自回归特性，即其配音情绪高度依赖于所提供的参考音频，特此说明：本视频所展示的配音情绪仅为采用某一特定参考音频时的效果示例，并不全面反映GPT-SOVITS模型能够生成的全部情绪范围及最终配音质量的上限。模型的最终表现将随着不同参考音频的输入而展现出多样化。

模型下载

训练日志

2024-08-01 22:22:52,493	星瞳	INFO	{'train': {'log_interval': 100, 'eval_interval': 500, 'seed': 1234, 'epochs': 20, 'learning_rate': 0.0001, 'betas': [0.8, 0.99], 'eps': 1e-09, 'batch_size': 4, 'fp16_run': True, 'lr_decay': 0.999875, 'segment_size': 20480, 'init_lr_ratio': 1, 'warmup_epochs': 0, 'c_mel': 45, 'c_kl': 1.0, 'text_low_lr_rate': 0.4, 'pretrained_s2G': 'GPT_SoVITS/pretrained_models/s2G488k.pth', 'pretrained_s2D': 'GPT_SoVITS/pretrained_models/s2D488k.pth', 'if_save_latest': True, 'if_save_every_weights': True, 'save_every_epoch': 20, 'gpu_numbers': '0'}, 'data': {'max_wav_value': 32768.0, 'sampling_rate': 32000, 'filter_length': 2048, 'hop_length': 640, 'win_length': 2048, 'n_mel_channels': 128, 'mel_fmin': 0.0, 'mel_fmax': None, 'add_blank': True, 'n_speakers': 300, 'cleaned_text': True, 'exp_dir': 'logs/星瞳'}, 'model': {'inter_channels': 192, 'hidden_channels': 192, 'filter_channels': 768, 'n_heads': 2, 'n_layers': 6, 'kernel_size': 3, 'p_dropout': 0.1, 'resblock': '1', 'resblock_kernel_sizes': [3, 7, 11], 'resblock_dilation_sizes': [[1, 3, 5], [1, 3, 5], [1, 3, 5]], 'upsample_rates': [10, 8, 2, 2, 2], 'upsample_initial_channel': 512, 'upsample_kernel_sizes': [16, 16, 8, 2, 2], 'n_layers_q': 3, 'use_spectral_norm': False, 'gin_channels': 512, 'semantic_frame_rate': '25hz', 'freeze_quantizer': True}, 's2_ckpt_dir': 'logs/星瞳', 'content_module': 'cnhubert', 'save_weight_dir': 'SoVITS_weights', 'name': '星瞳', 'pretrain': None, 'resume_step': None}
2024-08-01 22:22:53,372	星瞳	INFO	loaded pretrained GPT_SoVITS/pretrained_models/s2G488k.pth
2024-08-01 22:22:53,513	星瞳	INFO	loaded pretrained GPT_SoVITS/pretrained_models/s2D488k.pth
2024-08-01 22:23:16,515	星瞳	INFO	Train Epoch: 1 [0%]
2024-08-01 22:23:16,516	星瞳	INFO	[2.5046751499176025, 2.3556504249572754, 7.234616279602051, 21.664749145507812, 0.0, 2.5007972717285156, 0, 9.99875e-05]
2024-08-01 22:24:23,603	星瞳	INFO	Train Epoch: 1 [79%]
2024-08-01 22:24:23,615	星瞳	INFO	[2.7177071571350098, 2.2611474990844727, 9.35838794708252, 25.944425582885742, 0.0, 2.430809259414673, 100, 9.99875e-05]
2024-08-01 22:24:42,803	星瞳	INFO	====> Epoch: 1
2024-08-01 22:25:39,787	星瞳	INFO	Train Epoch: 2 [59%]
2024-08-01 22:25:39,801	星瞳	INFO	[2.800276041030884, 2.2021164894104004, 8.539608001708984, 24.598289489746094, 0.0, 2.8606467247009277, 200, 9.99750015625e-05]
2024-08-01 22:26:17,921	星瞳	INFO	====> Epoch: 2
2024-08-01 22:26:55,721	星瞳	INFO	Train Epoch: 3 [38%]
2024-08-01 22:26:55,729	星瞳	INFO	[2.8444392681121826, 2.5130393505096436, 5.553061485290527, 18.62834358215332, 0.0, 2.524972438812256, 300, 9.996250468730469e-05]
2024-08-01 22:27:57,465	星瞳	INFO	====> Epoch: 3
2024-08-01 22:28:17,654	星瞳	INFO	Train Epoch: 4 [17%]
2024-08-01 22:28:17,673	星瞳	INFO	[2.6629858016967773, 2.7910966873168945, 9.463623046875, 25.31916618347168, 0.0, 2.5149004459381104, 400, 9.995000937421877e-05]
2024-08-01 22:29:40,797	星瞳	INFO	Train Epoch: 4 [97%]
2024-08-01 22:29:40,817	星瞳	INFO	[2.323516368865967, 2.5002782344818115, 8.840145111083984, 23.39838409423828, 0.0, 1.8591214418411255, 500, 9.995000937421877e-05]
2024-08-01 22:29:43,554	星瞳	INFO	====> Epoch: 4
2024-08-01 22:31:05,243	星瞳	INFO	Train Epoch: 5 [76%]
2024-08-01 22:31:05,256	星瞳	INFO	[2.5074191093444824, 2.2732222080230713, 9.656474113464355, 24.897600173950195, 0.0, 2.361646890640259, 600, 9.993751562304699e-05]
2024-08-01 22:31:29,552	星瞳	INFO	====> Epoch: 5
2024-08-01 22:32:29,562	星瞳	INFO	Train Epoch: 6 [56%]
2024-08-01 22:32:29,577	星瞳	INFO	[2.2694385051727295, 2.4133496284484863, 9.872088432312012, 26.476680755615234, 0.0, 2.14212965965271, 700, 9.99250234335941e-05]
2024-08-01 22:33:15,204	星瞳	INFO	====> Epoch: 6
2024-08-01 22:33:53,884	星瞳	INFO	Train Epoch: 7 [35%]
2024-08-01 22:33:53,894	星瞳	INFO	[2.601313352584839, 2.4854249954223633, 9.119274139404297, 25.881484985351562, 0.0, 2.1985843181610107, 800, 9.991253280566489e-05]
2024-08-01 22:35:01,086	星瞳	INFO	====> Epoch: 7
2024-08-01 22:35:18,101	星瞳	INFO	Train Epoch: 8 [14%]
2024-08-01 22:35:18,112	星瞳	INFO	[2.7002434730529785, 2.6691322326660156, 9.335179328918457, 25.918882369995117, 0.0, 2.2375073432922363, 900, 9.990004373906418e-05]
2024-08-01 22:36:40,995	星瞳	INFO	Train Epoch: 8 [94%]
2024-08-01 22:36:41,013	星瞳	INFO	[2.4900717735290527, 2.4373843669891357, 9.26309871673584, 24.3397159576416, 0.0, 2.4614670276641846, 1000, 9.990004373906418e-05]
2024-08-01 22:36:47,065	星瞳	INFO	====> Epoch: 8
2024-08-01 22:38:05,472	星瞳	INFO	Train Epoch: 9 [73%]
2024-08-01 22:38:05,491	星瞳	INFO	[2.579963207244873, 2.4848170280456543, 9.11195182800293, 23.280630111694336, 0.0, 2.577446699142456, 1100, 9.98875562335968e-05]
2024-08-01 22:38:32,867	星瞳	INFO	====> Epoch: 9
2024-08-01 22:39:29,310	星瞳	INFO	Train Epoch: 10 [52%]
2024-08-01 22:39:29,329	星瞳	INFO	[2.7808988094329834, 2.217581272125244, 8.696685791015625, 25.884748458862305, 0.0, 2.690277099609375, 1200, 9.987507028906759e-05]
2024-08-01 22:40:18,506	星瞳	INFO	====> Epoch: 10
2024-08-01 22:40:53,519	星瞳	INFO	Train Epoch: 11 [32%]
2024-08-01 22:40:53,535	星瞳	INFO	[2.9054861068725586, 2.579571008682251, 9.00718879699707, 23.684154510498047, 0.0, 2.099416732788086, 1300, 9.986258590528146e-05]
2024-08-01 22:42:04,086	星瞳	INFO	====> Epoch: 11
2024-08-01 22:42:17,563	星瞳	INFO	Train Epoch: 12 [11%]
2024-08-01 22:42:17,581	星瞳	INFO	[2.48921799659729, 2.3982391357421875, 8.478012084960938, 24.614477157592773, 0.0, 2.142331123352051, 1400, 9.98501030820433e-05]
2024-08-01 22:43:40,680	星瞳	INFO	Train Epoch: 12 [90%]
2024-08-01 22:43:40,698	星瞳	INFO	[2.4978187084198, 2.3277788162231445, 7.685077667236328, 22.860332489013672, 0.0, 1.982999563217163, 1500, 9.98501030820433e-05]
2024-08-01 22:43:50,091	星瞳	INFO	====> Epoch: 12
2024-08-01 22:45:04,755	星瞳	INFO	Train Epoch: 13 [70%]
2024-08-01 22:45:04,772	星瞳	INFO	[2.30912446975708, 3.1625773906707764, 9.539575576782227, 23.238792419433594, 0.0, 2.7673556804656982, 1600, 9.983762181915804e-05]
2024-08-01 22:45:35,593	星瞳	INFO	====> Epoch: 13
2024-08-01 22:46:28,655	星瞳	INFO	Train Epoch: 14 [49%]
2024-08-01 22:46:28,671	星瞳	INFO	[2.62475848197937, 2.5506083965301514, 8.0669527053833, 26.406156539916992, 0.0, 2.256394624710083, 1700, 9.982514211643064e-05]
2024-08-01 22:47:20,668	星瞳	INFO	====> Epoch: 14
2024-08-01 22:47:52,078	星瞳	INFO	Train Epoch: 15 [29%]
2024-08-01 22:47:52,096	星瞳	INFO	[2.6125364303588867, 2.5390114784240723, 9.698610305786133, 25.269136428833008, 0.0, 2.5514633655548096, 1800, 9.981266397366609e-05]
2024-08-01 22:49:04,987	星瞳	INFO	====> Epoch: 15
2024-08-01 22:49:14,995	星瞳	INFO	Train Epoch: 16 [8%]
2024-08-01 22:49:15,006	星瞳	INFO	[2.649534225463867, 2.375997304916382, 6.654854774475098, 18.59393882751465, 0.0, 1.4320950508117676, 1900, 9.980018739066937e-05]
2024-08-01 22:50:37,152	星瞳	INFO	Train Epoch: 16 [87%]
2024-08-01 22:50:37,170	星瞳	INFO	[2.3389666080474854, 2.5685534477233887, 10.700148582458496, 26.111740112304688, 0.0, 1.768670916557312, 2000, 9.980018739066937e-05]
2024-08-01 22:50:49,719	星瞳	INFO	====> Epoch: 16
2024-08-01 22:52:00,615	星瞳	INFO	Train Epoch: 17 [67%]
2024-08-01 22:52:00,631	星瞳	INFO	[2.2893025875091553, 2.7907485961914062, 9.19239616394043, 24.59035873413086, 0.0, 2.036665201187134, 2100, 9.978771236724554e-05]
2024-08-01 22:52:34,369	星瞳	INFO	====> Epoch: 17
2024-08-01 22:53:14,119	星瞳	INFO	Train Epoch: 18 [46%]
2024-08-01 22:53:14,135	星瞳	INFO	[2.5745813846588135, 2.571639060974121, 8.375732421875, 25.625341415405273, 0.0, 2.726980209350586, 2200, 9.977523890319963e-05]
2024-08-01 22:54:00,420	星瞳	INFO	====> Epoch: 18
2024-08-01 22:54:28,646	星瞳	INFO	Train Epoch: 19 [25%]
2024-08-01 22:54:28,662	星瞳	INFO	[2.901784658432007, 2.4150283336639404, 7.380774974822998, 23.095401763916016, 0.0, 1.7983381748199463, 2300, 9.976276699833672e-05]
2024-08-01 22:55:46,030	星瞳	INFO	====> Epoch: 19
2024-08-01 22:55:52,839	星瞳	INFO	Train Epoch: 20 [5%]
2024-08-01 22:55:52,857	星瞳	INFO	[2.280160427093506, 2.5472564697265625, 9.695550918579102, 27.008045196533203, 0.0, 1.8510500192642212, 2400, 9.975029665246193e-05]
2024-08-01 22:57:14,819	星瞳	INFO	Train Epoch: 20 [84%]
2024-08-01 22:57:14,834	星瞳	INFO	[2.261357069015503, 2.2943029403686523, 8.503662109375, 22.65139389038086, 0.0, 2.5438740253448486, 2500, 9.975029665246193e-05]
2024-08-01 22:57:30,541	星瞳	INFO	Saving model and optimizer state at iteration 20 to logs/星瞳/logs_s2\G_233333333333.pth
2024-08-01 22:57:31,416	星瞳	INFO	Saving model and optimizer state at iteration 20 to logs/星瞳/logs_s2\D_233333333333.pth
2024-08-01 22:57:32,090	星瞳	INFO	saving ckpt 星瞳_e20:Success.
2024-08-01 22:57:32,091	星瞳	INFO	====> Epoch: 20

如何使用配音模型

1，gpt-sovits模型本地部署（适合有显卡的用户）

https://aiaf.cc/gmxtlsyjx

2，gpt-sovits模型云端部署

https://aiaf.cc/gpt-sovits-yunduan/

如果您想议一对一远程教学模型安装、模型训练，请联系微信 xiaoming1870

声音版权使用声明

本网站所展示的AI声音模型，源自站长及AI模型工作室的精心创作与提供。我们秉持非商业性使用的原则，仅以此平台作为娱乐非商业使用，同时，我们高度重视并严格遵守版权所有者的合法权益。特此声明，我们未获得亦不声称拥有这些声音模型的任何直接使用权或授权。

对于因模型整理、发布、声音转换效果制作及视频教学制作而产生的相关费用，我们明确其仅覆盖上述服务成本，绝不包含对模型版权本身的任何收费。我们承诺，所有活动均在法律框架内进行，尊重版权，合理且合法地使用与分享这些宝贵的AI声音资源。

若您对上述模型或我们的服务存在任何疑问、需要进一步的版权信息，或是有任何宝贵的建议与反馈，我们诚挚邀请您随时与我们取得联系。我们期待与您共同探讨，促进AI声音艺术的健康发展与尊重版权的良好氛围。

重要提示：在利用AI声音模型进行任何活动之前，我们强烈建议您深入了解并遵守相关版权与知识产权法律法规，确保您的行为合法且合规，共同维护良好的创作生态。