autofaiss
AutoFaiss是一个开源工具,用于自动创建高效的Faiss近邻搜索索引。该工具根据内存和查询速度限制,自动选择最佳索引参数,以获得最高召回率。AutoFaiss能处理大规模数据集,在有限内存下构建高效索引,实现毫秒级查询。它提供Python API和命令行接口,支持内存和磁盘上的嵌入向量,并可与PySpark集成进行分布式索引构建。