Project Icon

FRESCO

基于空间-时间对应的零样本视频转换技术

FRESCO是一种新型零样本视频转换技术,通过建立空间-时间约束来实现跨帧内容的一致转换。该方法结合帧内和帧间对应关系,对特征进行更新以保持与输入视频的一致性。FRESCO无需训练即可使用,兼容现有模型,能生成高质量连贯的视频,性能超过其他零样本方法。

MotionClone - 从参考视频克隆动作实现可控文本到视频生成
AI控制GithubMotionClone动作克隆开源项目文本到视频视频生成
MotionClone是一个无需训练的框架,通过从参考视频克隆动作来控制文本到视频的生成。该项目采用时间注意力机制和位置感知语义引导,有效处理微妙动作并提升生成模型的提示理解能力。MotionClone为视频创作和研究提供了全面的动作和语义指导工具,推动了可控视频生成技术的发展。
VEnhancer - 提升文本到视频生成质量的时空增强框架
AI视频处理GithubVEnhancer开源项目扩散模型空间时间增强视频生成
VEnhancer是一个时空增强框架,旨在提高文本到视频(T2V)生成模型的输出质量。该框架基于ControlNet结构,整合了预训练视频扩散模型的多帧编码器和中间块,构建可训练的条件网络。VEnhancer接收低分辨率关键帧和完整噪声潜在帧作为输入,通过噪声增强和下采样因子进行网络调节,从而生成更高质量、更连贯的视频内容。
TemporalKit - 优化Stable Diffusion视频的时间稳定性和连贯性
EbSynthGithubStable DiffusionTemporalKit关键帧开源项目视频处理
TemporalKit是Stable Diffusion的扩展插件,旨在提高AI生成视频的时间稳定性。该工具支持关键帧提取、图像处理和EbSynth集成,可生成流畅连贯的视频效果。它简化了视频处理流程,支持批量处理,并提供详细教程。TemporalKit适合需要提升AI视频质量的创作者使用,有助于生成更加稳定和连贯的视频内容。
videocomposer - 灵活可控的视频合成与运动模式生成工具
AI生成GithubVideoComposer动作控制开源项目扩散模型视频合成
VideoComposer是一个开源的视频合成模型,能够同时控制生成视频的空间和时间特征。它支持文本、草图、参考视频等多种输入形式,为用户提供灵活的创作方式。项目包含预训练模型和用户界面,便于研究人员和开发者进行视频合成实验。
Consistent4D - 单目视频到360度动态物体的生成
4D重建Github动态物体生成单目视频开源项目时空一致性神经辐射场
Consistent4D是一种创新方法,能从未校准的单目视频生成动态物体的360度视图。该方法将360度动态物体重建转化为4D生成问题,利用物体级3D感知图像扩散模型监督动态神经辐射场的训练。Consistent4D引入级联DyNeRF和插值驱动的一致性损失,无需繁琐的多视图数据收集和相机校准。实验表明,该方法在4D动态物体生成和文本到3D生成任务中展现出优异性能。
Live2Diff - 革新视频扩散模型的实时流翻译技术
AI模型GithubLive2Diff实时流处理开源项目扩散模型视频翻译
Live2Diff是一款基于视频扩散模型的实时流翻译工具。该项目采用单向时间注意力机制,结合多时间步KV缓存和深度先验技术,实现高效的视频处理。支持DreamBooth和LoRA风格迁移,并通过TensorRT优化性能。在512x512分辨率下,处理速度可达16.43 FPS,为实时视频翻译领域提供了新的技术方案。
flowframes - 视频插值工具,支持多种AI模型
DAIN NCNNFLAVR PytorchFlowframesGithubRIFE NCNN开源项目视频插帧
Flowframes是一个Windows视频插值工具,兼容RIFE(Pytorch & NCNN)、DAIN(NCNN)和FLAVR(Pytorch)多种AI实现。作为开源捐赠软件,用户可在itch.io免费下载旧版本或通过Patreon获取最新测试版本。无需复杂配置,支持自动下载依赖。配备Nvidia GPU的用户建议使用CUDA实现以优化性能。
4DGen - 基于视频的动态3D内容生成,实现空间-时间一致性
4DGen4D内容生成Github开源项目空间时间一致性视频到4D生成高斯散射
4DGen是一个开源项目,专注于基于视频的4D内容生成。该项目支持视频、图像和文本到4D的转换,通过融合多种技术实现空间-时间一致性。4DGen提供了创建动态3D内容的工具,并开放了代码和数据集,为相关研究和开发提供资源。
Diffusion4D - 视频扩散模型实现快速生成时空一致4D内容
3D转4D4D生成Diffusion4DGithub大规模动态3D数据集开源项目视频扩散模型
Diffusion4D是一个基于视频扩散模型的开源项目,专注于生成时空一致的4D内容。该项目整合了大规模动态3D数据集、先进渲染技术和扩散模型,实现了图像、文本和3D模型到4D内容的转换。项目提供了数据集准备指南和渲染脚本,为计算机视觉和图形学研究提供了有价值的资源。Diffusion4D在4D内容生成领域展现了新的可能性,对相关技术发展具有推动作用。
Fast-SRGAN - 基于Pixel Shuffle的SR-GAN实时超分辨率视频放大
Fast-SRGANGithubPython 3.10像素洗牌开源项目超分辨率预训练模型
Fast-SRGAN是一个开源项目,基于SR-GAN架构和Pixel Shuffle技术,旨在实现实时超分辨率视频放大。实验证明,在MacBook M1 Pro GPU上可以达到720p视频的30fps处理速度。项目提供预训练模型并支持自定义训练参数,用户可通过配置文件或命令行参数进行设置并在Tensorboard上监控训练进度。欢迎社区贡献意见和改进。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

稿定AI

稿定设计 是一个多功能的在线设计和创意平台,提供广泛的设计工具和资源,以满足不同用户的需求。从专业的图形设计师到普通用户,无论是进行图片处理、智能抠图、H5页面制作还是视频剪辑,稿定设计都能提供简单、高效的解决方案。该平台以其用户友好的界面和强大的功能集合,帮助用户轻松实现创意设计。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号