2023-04-09 15:31:06 +00:00
|
|
|
|
20230409
|
|
|
|
|
|
2023-04-09 15:57:14 +00:00
|
|
|
|
修正训练参数,提升显卡平均利用率,A100最高从25%提升至90%左右,V100:50%->90%左右,2060S:60%->85%左右,P40:25%->95%左右,训练速度显著提升
|
2023-04-09 15:31:06 +00:00
|
|
|
|
|
|
|
|
|
修正参数:总batch_size改为每张卡的batch_size
|
|
|
|
|
|
|
|
|
|
修正total_epoch:最大限制100解锁至1000;默认10提升至默认20
|
|
|
|
|
|
|
|
|
|
修复ckpt提取识别是否带音高错误导致推理异常的问题
|
|
|
|
|
|
|
|
|
|
修复分布式训练每个rank都保存一次ckpt的问题
|
|
|
|
|
|
|
|
|
|
特征提取进行nan特征过滤
|
2023-04-09 15:57:14 +00:00
|
|
|
|
|
|
|
|
|
修复静音输入输出随机辅音or噪声的问题(老版模型需要重做训练集重训)
|