专题：peft

本文介绍了在 Amazon Bedrock 上对 Amazon Nova 系列模型进行微调的完整流程，包括监督微调、强化微调和模型蒸馏三种方法。通过示例展示了如何准备 JSONL 训练数据、配置 S3 桶与 IAM 权限、设置关键超参数并监控训练过程。以 Nova Micro 微调 ATIS 意图分类任务为例，说明了数据质量、超参数调优对提升准确率（从 4…

本课程提供12小时的深度学习内容，涵盖PEFT、RLHF、DPO等关键技术，以及Unsloth、Axolotl等工具，帮助开发者高效微调大型语言模型并应用于企业级多模态场景。

Amazon Nova Forge服务旨在解决大型语言模型（LLMs）在领域适应性与通用能力保留之间的矛盾。传统全参数微调易导致“灾难性遗忘”，而Nova Forge通过独特的数据混合技术，允许用户将自有专有数据与亚马逊通用训练数据结合，进行监督式微调（SFT）。这种方法不仅能显著提升模型在特定领域任务上的性能（如语音反馈分类任务中提升17%），还能有效缓…