趋近智
高级语音识别与合成
章节 1: 现代语音处理流程的核心组成
高级音频特征提取
语音统计建模回顾
序列的深度学习结构
ASR 系统组成部分
文本转语音（TTS）系统的组成部分
评估指标的再审视
章节 2: 高级ASR声学建模
混合HMM-DNN系统
联结主义时间分类 (CTC)
注意力机制的编码器-解码器模型
RNN 转导器 (RNN-T)
用于自动语音识别的Transformer架构
高级训练方法
解码算法比较
动手实践：构建一个端到端ASR模型
章节 3: ASR中的语言建模与适应
ASR中的神经网络语言模型
浅层集成与深度集成
语境ASR
说话人适应技术
环境与信道适应
自动语音识别中的无监督和半监督学习
多语言和跨语言自动语音识别
实践：使用适应数据微调ASR
章节 4: 高级文本到语音合成
自回归声学模型 (Tacotron, Transformer TTS)
非自回归声学模型 (FastSpeech, ParaNet)
基于流的文本到语音合成模型
生成对抗网络（GANs）在文本到语音中的应用
韵律建模与控制
富有表现力的语音合成
声音克隆与转换
动手实践：训练高级TTS模型
章节 5: 神经网络声码器与波形生成
传统声码器的不足之处
自回归波形模型（WaveNet, WaveRNN）
基于流的声码器 (WaveGlow, FloWaveNet)
基于GAN的声码器（MelGAN, HiFi-GAN）
用于声码器的扩散模型
神经网络声码器的条件化
合成音频质量评估
动手实践：使用神经声码器
章节 6: 优化、部署与工具集
语音模型量化
模型剪枝与稀疏化
ASR/TTS 的知识蒸馏
优化推理引擎（ONNX Runtime, TensorRT）
流式ASR的部署考量
实时文本转语音（TTS）的部署考虑
语音处理工具包（ESPnet, NeMo, Coqui）概述
实践：优化语音模型
文本转语音（TTS）系统的组成部分
这部分内容有帮助吗？
- Speech and Language Processing (3rd Edition), Daniel Jurafsky and James H. Martin, 2025 - 这是广泛使用的教材的正在进行的草稿。它涵盖了语音和语言处理的各个方面，包括文本到语音合成基础知识、文本规范化、语言分析以及TTS系统演变的综合章节。
- The HMM-based Speech Synthesis System (HTS), Keiichi Tokuda, Takashi Zen, Yoshihiko Nankaku, 2002 7th International Conference on Spoken Language Processing, ICSLP2002 - INTERSPEECH 2002 (ISCA) - 本文介绍了基于HMM的语音合成基础框架，该框架多年来一直是主要的参数化TTS方法。它详细描述了频谱特征和基频（F0）的统计建模。
- Natural TTS Synthesis by Conditioning WaveNet on Mel Spectrogram Predictions, Jonathan Shen, Ruoming Pang, Ron J. Weiss, Mike Schuster, Navdeep Jaitly, Zongheng Yang, Zhifeng Chen, Yu Zhang, Yuxuan Wang, RJ Skerry-Ryan, Rif A. Saurous, Yannis Agiomyrgiannakis, Yonghui Wu, 2018 ICASSP DOI: 10.48550/arXiv.1712.05884 - 本文介绍了Tacotron 2，这是一个重要的端到端神经文本到语音系统，通过预测梅尔频谱图生成自然语音，然后由WaveNet声码器将其转换为音频。它展示了迈向更简单、更高质量的神经TTS的重大一步。