先整理来源清楚、获得相应用途授权的录音,再依照 RVC 当前官方流程检查切片、静音和素材一致性;训练后仍要试听,数据准备不能保证完全消除音色泄漏。如果你第一次准备个人录音,或要把团队的语音转换模型训练流程做成可复现步骤,可以照下面的时间顺序操作。
第一次用个人录音训练 RVC 的创作者,可以从素材筛选开始。
为配音或视频项目准备模型的团队,可以把每次检查结果写入项目记录。
做声音模型实验的开发者,可以用这套流程留下素材来源、处理版本和试听结论。
第一步:先确认录音来源、声音授权和使用范围
你拿到录音文件,不等于获得了用它训练声音模型的授权。至少要分别核实:谁录制或表演、谁持有录音或作品相关权利、许可是否涵盖模型训练,以及训练产物能否用于目标用途。美国版权局指出,录音中的声音作品与录音本身可能是分开的受保护作品;但具体权利还要看实际许可和适用法律,不能仅凭文件在手就推定可以训练或商用。可从版权局关于音乐作品与录音作品的说明和录音作品权利概述开始核查。
如果录音里包含他人声音,需取得覆盖训练和预期使用方式的明确许可;授权范围不清楚时,先暂停使用,而不是事后补记。此处是素材管理建议,不是法律意见。
建议为每批素材保存一份记录:
- 素材文件名、来源和取得日期。
- 说话者或表演者,以及录音者、制作方等已知信息。
- 许可文件或授权沟通记录的存放位置。
- 是否允许训练、内部测试、公开发布或商业使用;不确定的项目标为“待确认”。
为什么要把录音文件的取得与训练、使用许可分开核实? 因为文件提供者未必同时拥有录音、表演和其中作品的全部权利;许可也可能只允许播放或剪辑,并未覆盖训练或模型发布。版权局的说明可帮助你识别需要核对的权利类型,但不是对每个 RVC 项目作出的法律结论。
第二步:筛选录音,保留原件并统一目录
筛选时,优先留下说话内容可辨、目标声音突出、背景声不抢耳的录音。逐段试听,剔除多人重叠、持续音乐、远距离说话、明显爆音或剪辑接缝突兀的部分。不要只因文件格式可读,就把它当作合格训练数据。
RVC 项目说明建议收集至少 10 分钟低底噪语音;这是项目建议,不是保证音质或训练效果的最低门槛,也不能替代内容清晰度、声音一致性和许可检查。相关建议见官方项目说明。
把原始素材设为只读或单独备份,处理结果另存。目录可按下列方式组织:
项目名/
00_original/ 原始录音,不覆盖
01_selected/ 人工筛选后的素材
02_processed/ 按当前流程生成的文件
03_test_output/ 试训和试听样本
manifest.csv 来源、许可、检查记录
再统一文件命名,例如“日期_说话者_场景_版本”。这些只是便于追溯的命名字段,不代表官方要求;重点是同一项目里能查清每个文件来自哪里、经过了什么处理。官方代码和说明可以作为操作依据,但不意味着任意录音都适合作为训练数据。
第三步:逐段检查噪声、削波、静音与录音环境
不要一上来就批量降噪、归一化或裁切。先回听并记录问题出现在哪个文件、哪个时间段,再决定是否处理;强力降噪可能改变齿音、气声或尾音,让问题从背景噪声变成声音质感变化。
检查时可重点听:
- 底噪:空调、风声、电脑风扇、交通声是否贯穿说话段。
- 削波与爆音:高音量处是否出现刺耳失真;波形峰值贴顶只是线索,最终以试听判断。
- 长静音与尾音:开头或结尾有没有无意义空白,是否误删辅音、呼吸或句尾。
- 环境突变:麦克风远近、房间混响、输入电平、背景噪声是否在录音之间明显变化。
录音环境的差异会不会影响转换结果? 这会带来需要核查的风险:明显不同的房间混响、麦克风距离或背景声,可能让训练素材不够一致。但官方流程没有承诺某种清理方法能修复所有环境差异;把问题段落标记出来并进行试训试听,比盲目套同一组降噪参数更稳妥。关于静音检测与切分细节,可参考官方训练说明中的相关提示,但旧版提示不应直接当作当前版本的固定参数。
第四步:按当前 RVC 流程切片,逐项验收输出
切片前,先阅读你实际使用版本的 README 与训练说明,再运行对应的预处理步骤。当前命令行文档将数据预处理、F0 提取、HuBERT 特征提取、模型训练和索引训练列为不同阶段;单说话者预处理示例也展示了输入目录、采样率、工作进程数和实验目录等参数。示例仅供理解参数含义,不要直接照搬旧教程,也不要把示例数值当成适用于所有机器和版本的设置。具体流程以官方命令行训练文档为准。
实际操作按这个次序验收:
- 记录仓库版本或提交标识,并确认当前训练文档。
- 为本次试验新建实验目录,不覆盖原始录音或上次结果。
- 依据当前版本选择预处理参数并启动切片。
- 检查输出文件是否齐全、可播放,时长是否符合预期。
- 抽听片段开头、结尾和切分边界,重点找被截断的辅音、尾音及残留长静音。
- 发现异常就回到对应源文件复听,记录后再决定修复或剔除。
采样率等预处理参数应与当前项目配置对应。不要只因为某个旧教程提供了固定值,就认定它适合你的当前版本;参数有疑问时,先核对当前文档和代码,再开新实验验证。
整理过程若涉及远程环境或文件传输,先核对实际可用的服务与操作说明;VPSSpark 帮助中心可作为查询入口,但其中的信息不等于 RVC 对具体设备或系统的兼容承诺。
第五步:小规模试训,用回听结果定位偏差
正式扩大数据量前,先用能代表录音来源、说话内容和环境变化的一批素材试训。试听时把发音清晰度、底噪、声音偏差分开记录;输入测试句最好包含不同辅音、音高和语速,避免只凭一句短句判断模型。
RVC 项目介绍了检索机制用于缓解音色泄漏,项目常见问题也讨论了检索比例、训练集质量与可能出现的音色偏差。但这类说明不是保证:索引和参数不能把不均匀或低质量素材自动变成一致数据,也不证明整理素材即可完全防止泄漏。试听时如果目标音色不稳,分别检查原始素材环境差异、切片错误和推理设置,不要只反复调一个参数。相关背景可查阅项目常见问题中的检索机制说明。
如何确认训练用声音素材有相应授权? 查看书面许可或可留档的明确授权,确认它是否涵盖训练、模型输出、公开发布及商业使用等计划用途。把许可范围和素材文件关联保存;授权模糊或缺失,就换用本人录音或先取得明确许可。对作品与录音权利的区分,可参考前文的版权局说明;它不能代替针对具体项目的法律审查。
整理完成后,按条件选下一步
- 若来源与许可都能追溯,录音清晰且环境差异可解释:进入当前官方预处理流程,再用代表性片段试训和试听。
- 若授权范围不明:先暂停这批素材,补齐许可或换用有明确授权的录音。
- 若噪声、削波或环境突变集中在少数文件:逐段回听、标记并决定修复或剔除;不要对整批素材盲目套用同一清理操作。
- 若切片出现截断、不可播放或静音异常:回到源文件复查,并按当前仓库版本重新处理;不要沿用未经核对的旧教程参数。
- 若试训后仍有音色偏差:将训练素材问题与检索、推理参数问题分开排查,不能把“开了检索”当作彻底消除泄漏的保证。
| 对比项 | 可进入试训的素材 | 需要先复查的素材 |
|---|---|---|
| 内容 | 说话清楚,目标声音突出 | 多人重叠、音乐压过人声 |
| 声音 | 无明显削波,底噪不抢耳 | 爆音、持续噪声或远距离收音 |
| 环境 | 录音条件相对一致,差异有记录 | 混响、距离或背景声突然变化 |
| 来源 | 文件来源及许可范围可追溯 | 仅有文件,没有训练用途许可记录 |
| 切片 | 输出可播放,边界听起来完整 | 辅音截断、长静音残留或文件异常 |
| 运行选择 | 更适合的工作 | 你需要先核对什么 |
|---|---|---|
| 本地现有训练环境 | 已验证项目依赖和目标设备的正式训练 | 当前仓库要求、依赖版本、设备支持与数据备份 |
| 临时远程训练环境 | 本地设备无法满足已确认的训练条件 | 数据上传风险、存储与删除方式、实际设备配置 |
| Mac 上整理或试听 | 文件管理、素材筛选等不依赖未验证训练兼容性的工作 | 目标软件与当前系统、芯片的兼容范围 |
| 直接在 Mac 上训练 | 只有在目标版本明确支持且你已验证时才考虑 | 官方支持范围;不要把素材整理可行等同于训练可行 |
材料记录应包括素材清单版本、许可记录位置、处理日期、仓库版本、预处理参数、异常备注和试听结果。官方流程会随仓库版本变化,复现靠的是保存当时的版本和参数,而不是收藏一条旧命令。若你需要核对远程操作相关信息,也可以通过VPSSpark 帮助中心的服务说明查询;不能用帮助页面替代对目标训练环境的兼容性确认。
如果你现在依赖的方案是临时拼凑的本地环境,常见成本是依赖冲突、设备占用和每次重建环境都要重新排错;改用远程环境则还要额外评估上传录音的隐私与传输成本。若你只是需要临时的 Mac 环境来整理素材或试听,且目标工具确认可运行,可以了解 VPSSpark 的 Mac 租赁选项;它不等于 RVC 官方训练兼容保证。若你的目标是长期稳定训练,或需要特定物理接口,本地设备或经过验证的训练环境可能更合适。即使换了运行环境,RVC 训练音频素材整理仍要回到授权、切片验收和试听验证这几项。
为 RVC 素材整理与试训,准备一台远程 Mac
VPSSpark 提供 Mac mini M4 云端设备,适合集中整理音频、切片并开展小规模试训。
按天、周、月或季度选择租用周期,先用合适的时间与预算验证工作流程。