在重尾噪声下，使用（或不使用）梯度裁剪的梯度归一化确保了非凸 SGD 的收敛，并改进了结果

本文证明了在重尾噪声下，仅使用梯度归一化就能保证 SGD 的收敛，并改进了 NSGDC 和 NSGDC-VR 的收敛速度，同时证明了在二阶平滑条件下，加速方案可以进一步提高 NSGDC 的收敛速度。