#HuggingFaceFW

该项目引入了一种基于FastText的分类器，旨在评估网页的教育价值。通过使用fineweb-edu-llama3-annotations数据集进行训练，该模型支持高速数据处理，在CPU上每秒可分类超过2000个样本。该分类器与基于transformer的模型进行了性能比较，尤其在标签0、1、2上的表现相近，但在较高标签上性能稍有下降。适合用于需要快速判断网页教育内容的场景，是处理大数据的有效工具。