趋近智
继上一章对宪法级人工智能进行理论探讨之后,本章将提供一份实用指南,指导如何构建CAI流程的各个组成部分。我们将从理论转入实践编码,详细说明实现CAI核心监督学习 (supervised learning)阶段所需的步骤。
您将学到如何:
我们还将讨论常见的实施难题、调试策略,并包含一个实操练习,侧重于构建一个重要组成部分:人工智能批评意见生成步骤。本章将为您提供开始构建CAI系统的实践知识。
3.1 建立宪法文件
3.2 生成初始回应
3.3 实施AI评估器模型
3.4 实施AI修订模型
3.5 构建监督微调数据集
3.6 使用 CAI 数据微调 LLM
3.7 调试与迭代CAI流程
3.8 动手实践:构建简单的宪法AI批评环节