lilac
Lilac是一个开源的AI数据处理工具,专注于数据集的探索、管理和质量控制。它提供交互式数据探索、LLM驱动的搜索、聚类和标注功能,支持本地运行和云端处理。Lilac能够优化数据集,降低AI训练成本,并支持语义搜索和概念搜索等高级特性。该工具已被Cohere和Databricks等公司采用,用于改善预训练和微调数据的质量。