schedule_free

自适应训练优化器，无需预设停止时间

Schedule-Free Learning 优化器 PyTorch 梯度下降动量 Github 开源项目

Schedule-Free Learning是一种新型PyTorch优化器，无需预设训练停止时间。该方法通过结合插值和平均技术取代传统动量，提高训练效率。不依赖学习率递减调度，却能达到或超越先进调度方法的效果。支持AdamW和SGD版本，并提供实验性包装器，可与各种基础优化器兼容。这种灵活的优化方法为深度学习模型训练提供了新的可能性。

Github

Huggingface

介绍相关项目

flow-forecast - 开源时间序列深度学习框架，支持最新模型和云端集成

Flow ForecastGithubtransformer开源开源项目时间序列预测深度学习

Flow Forecast 是一个开源时间序列预测深度学习框架，提供最新的Transformer、注意力模型、GRU等技术，并具有易于理解的解释指标、云集成和模型服务功能。该框架是首个支持Transformer模型的时间序列框架，适用于流量预测、分类和异常检测。

FLAML - 高效的Python库，用于自动化机器学习和模型调优

AutoMLFLAMLGithubPython开源项目机器学习模型优化

FLAML是一款轻量级且高效的Python库，旨在简化大语言模型和机器学习模型的自动化工作流程。通过多智能体对话框架和经济高效的自动调优功能，它帮助用户找到优质模型并优化GPT-X工作流。FLAML支持代码优先的AutoML和调优，能处理大规模搜索空间和复杂约束，广泛适用于分类、回归等任务。适用于Python 3.8及以上版本，并提供详细文档和多种扩展选项，满足用户的不同需求。

fastai - 一个为从业者提供快速提供在标准深度学习领域中提供最先进的高级组件，并提供可以混合和匹配的低级组件构建新方法的深度学习库

GPU优化GithubPyTorchfastai开源项目深度学习计算机视觉

fastai是一个深度学习库，提供高层组件以快速实现高性能结果，同时为研究人员提供可组合的低层组件。通过分层架构和Python、PyTorch的灵活性，fastai在不牺牲易用性、灵活性和性能的情况下，实现了高效的深度学习。支持多种安装方式，包括Google Colab和conda，适用于Windows和Linux。学习资源丰富，包括书籍、免费课程和详细文档。

doremi - 创新算法提升语言模型训练效率

DoReMiGithub代理模型分布鲁棒优化开源项目数据混合优化语言模型

DoReMi是一种优化语言模型数据集混合的算法。它通过分布鲁棒优化调整数据混合，适应不同目标分布。算法训练小型代理模型动态调整各领域数据权重，并利用预训练参考模型避免对高熵领域过于悲观。DoReMi显著提高大型模型训练效率，如280M代理模型可使8B参数模型达到基线性能的速度提高2.6倍。项目提供PyTorch实现，包含快速可恢复的数据加载器和下游评估工具。

Qwen2-0.5B - 使用Unsloth提升微调效率和内存优化

GithubHuggingfaceLlamaQwen2Unsloth内存优化开源项目快速微调模型

Unsloth提供的工具支持在Google Colab上微调多种模型，如Llama、Gemma、Mistral等，速度提升可达5倍，内存使用减少至74%。简便的操作流程允许用户快速上传数据集并运行所有步骤，生成优化后的模型，支持导出和上传至各大平台，显著提高微调效率，是开发和测试AI模型的可靠工具。

torchsde - 提供GPU支持的随机微分方程求解器

GANGithubNeural SDEPyTorchSDE solverstochastic differential equation开源项目

这个库提供了支持GPU和高效反向传播的随机微分方程（SDE）求解器。其使用Python和PyTorch开发，安装方便，并附有丰富的示例。用户可以通过简单的代码示例快速入门，并通过文档进一步学习。除了基础功能外，还包括潜在SDE和GAN中的SDE等高级应用示例。适用于在高性能计算环境中执行复杂SDE模型的研究人员和开发者。

lightly - 简单易用的自监督学习工具，支持自定义骨干模型和分布式训练

GithubLightlyPyTorch多模型支持开源项目自监督学习计算机视觉

这个开源项目提供简单易用的自监督学习工具，支持自定义骨干模型和分布式训练。通过模块化设计，用户可以自由调整损失函数和模型头。项目还提供商业版本，包含用于嵌入、分类、检测和分割任务的预训练模型。此外，平台集成了主动学习和数据策划功能，适用于大规模数据处理和强大算法的应用。

Mistral-Nemo-Instruct-2407 - 快速高效的模型微调工具，降低内存消耗

GithubGoogle ColabHuggingfaceMistralUnsloth开源项目微调性能优化模型

利用Unsloth技术，在简化操作的同时，在Google Colab环境下实现模型微调，速度提升至5倍，内存使用降低70%。界面设计便于数据集上传和模型优化，并支持导出为GGUF、vLLM格式或上传至Hugging Face。兼容多种模型如Llama、Gemma、Mistral等，即便大型模型也可显著加快微调过程。

oneflow - 用户友好且高效扩展的深度学习框架

CUDA支持GithubOneFlowPyTorch API分布式训练开源项目深度学习框架

OneFlow是一款深度学习框架，提供类似PyTorch的API，支持n维并行执行的全局张量以及图编译器用于加速和部署模型。最新版本1.0.0已发布，兼容Linux和多个Python版本。用户可以通过Docker或Pip轻松安装，并利用丰富的文档和模型库快速上手，适合大型变压器模型的并行训练和计算机视觉任务。

Deep-reinforcement-learning-with-pytorch - 深度强化学习PyTorch实现与代码示例

DQNDeep Reinforcement LearningGithubGymTD3pytorch开源项目

本项目提供经典和前沿的深度强化学习算法PyTorch实现，包括DQN、DDPG、PPO等。项目持续更新并维护，适用于Anaconda虚拟环境管理。详细的安装步骤和测试方法确保用户能顺利运行代码，文档中还提供了相关论文和代码链接，便于深入学习研究。

相关项目

项目侧边栏1

项目侧边栏2

推荐项目

Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手，通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能，支持100+编程语言，与主流编辑器无缝集成，显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台，能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐，Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案，通过智能技术简化视频制作流程。无论是企业宣传还是个人分享，有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持，能够阅读和理解用户上传的文件内容，解析网页信息，并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题，Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术，为商家提供一键生成商品图和营销文案的服务，显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台，让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型，免费访问各种图像生成与AI训练工具，从Stable Diffusion等基础模型开始，轻松实现创新图像生成。体验前沿的AI技术，推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器，它将改变您观看视频的方式！SubCat结合了先进的人工智能技术，为您提供即时视频字幕翻译，无论是本地视频还是网络流媒体，让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台，利用前沿AI技术，为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图，再到文案生成，美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具，简化了选题、文献检索至论文撰写的整个过程。通过简单设定，平台可快速生成高质量论文大纲和全文，配合图表、参考文献等一应俱全，同时提供开题报告和答辩PPT等增值服务，保障数据安全，有效提升写作效率和论文质量。

使用协议隐私政策广告服务

投诉举报邮箱: service@vectorlightyear.com

@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号