#偏好对齐

KnowPAT是一个创新的大语言模型优化项目，专注于提升模型在特定领域问答中的表现。该项目通过整合领域知识图谱构建偏好集，并设计新的对齐目标来微调模型，使其更好地利用外部知识。KnowPAT提供了完整的训练和推理代码，并在RJUA等数据集上进行了实验验证，为领域特定问答系统的开发提供了有力支持。