Kaiming (何) 初始化

这部分内容有帮助吗？

参考文献

Delving Deep into Rectifiers: Surpassing Human-Level Performance on ImageNet Classification, Kaiming He, Xiangyu Zhang, Shaoqing Ren, and Jian Sun, 2015 Proceedings of the IEEE International Conference on Computer Vision (ICCV) (IEEE) DOI: 10.1109/ICCV.2015.123 - 介绍He初始化（Kaiming初始化）的基础论文，提供了其在深度网络中使用ReLU激活时的推导和经验验证。
Deep Learning, Ian Goodfellow, Yoshua Bengio, and Aaron Courville, 2016 (MIT Press) - 一本全面涵盖深度学习基础知识的教科书，包括Xavier和He等多种权重初始化策略及其理论基础。
torch.nn.init, PyTorch Developers, 2022 (PyTorch Foundation) - PyTorch权重初始化函数的官方文档，包括kaiming_normal_和kaiming_uniform_，详细说明了其用法和参数。
Understanding the difficulty of training deep feedforward neural networks, Xavier Glorot, Yoshua Bengio, 2010 Proceedings of the Thirteenth International Conference on Artificial Intelligence and Statistics, Vol. 9 (PMLR) - 介绍了Xavier初始化，它是Kaiming初始化的前身，专为对称激活函数设计，为Kaiming解决的问题提供了背景。