aici
AICI提供了一个灵活的大型语言模型(LLM)输出控制平台,允许开发者通过自定义逻辑实时监控和调整模型输出。支持本地和云端部署,基于WebAssembly实现高安全性和高性能,支持多种编程语言,确保与多种LLM引擎如llama.cpp和HuggingFace Transformers的兼容。