#直接偏好优化

luxia-21.4b-alignment-v1.0是基于luxia-21.4b的指令微调和对齐模型，使用监督微调和直接偏好优化技术，提升模型的准确性和使用体验。