EMO

音频驱动的富表情肖像视频生成模型

EMO是一种音频到视频的扩散模型，可在弱条件下生成表现力丰富的肖像视频。该项目由阿里巴巴智能计算研究院开发，将音频输入转化为面部表情和头部动作，增强数字人物的自然度和情感表达。EMO技术在虚拟主播和数字人互动等领域具有应用潜力，可提供更真实的视觉体验。

访问官网

Github

论文

介绍相关项目

MuseTalk - 音频驱动的实时高质量唇形同步模型

AI虚拟人GithubMuseTalk实时唇形同步开源项目潜在空间修复音频驱动

MuseTalk是一款实时高质量的音频驱动唇形同步模型,可在NVIDIA Tesla V100上以30fps+的速度运行。该模型能根据输入音频修改未见过的人脸,支持多种语言,并可调整面部区域中心点来影响生成效果。MuseTalk在HDTF数据集上训练,可与MuseV等虚拟人技术结合,为生成具全身动作和交互能力的虚拟人奠定基础。

CVPR2022-DaGAN - 基于深度感知的说话头像视频生成技术

DaGANGithub人工智能对抗生成网络开源项目深度感知视频生成

DaGAN是一种新型深度感知生成对抗网络,旨在生成高质量的说话头像视频。该方法利用面部深度信息提升生成效果,可适用于卡通和真人头像。在VoxCeleb1数据集上,DaGAN展现出优异性能。项目开源了预训练模型、在线演示和训练代码,便于研究复现。作为CVPR 2022的成果,DaGAN代表了说话头像生成领域的重要进展。

Live2Diff - 革新视频扩散模型的实时流翻译技术

AI模型GithubLive2Diff实时流处理开源项目扩散模型视频翻译

Live2Diff是一款基于视频扩散模型的实时流翻译工具。该项目采用单向时间注意力机制，结合多时间步KV缓存和深度先验技术，实现高效的视频处理。支持DreamBooth和LoRA风格迁移，并通过TensorRT优化性能。在512x512分辨率下，处理速度可达16.43 FPS，为实时视频翻译领域提供了新的技术方案。

Awesome-Video-Diffusion - 人工智能视频生成与编辑技术资源大全

AI视频Github开源项目扩散模型文本到视频视频生成视频编辑

本文汇集了视频生成、编辑、修复和理解领域的最新扩散模型研究。内容包括开源工具箱、基础模型、评估基准和指标等。涵盖基础视频生成、可控生成、长视频生成、3D视频生成等多个方向，为视频AI技术研究和开发提供全面参考。

Reecho.AI - 拟真多语言语音合成与瞬时克隆平台

AI工具AI音频Reecho人声大模型多语言支持定制化服务热门语音克隆音频生成

Reecho睿声是专业的多语言语音合成与瞬时克隆平台，采用先进AI技术，快速实现与真人无异的拟真语音。平台支持丰富的应用场景，包括视频制作、有声内容制备等，能有效解析文本与声音的细微关系，输出自然且富有表现力的声音效果。

Vlogger - 多模型协作生成长视频博客的AI系统

AI系统GithubShowMakerVlogger大语言模型开源项目视频生成

Vlogger是一个创新AI系统,可根据文本描述生成分钟级视频博客。该系统利用大型语言模型作为导演,将长视频生成任务分解为四个阶段,并调用多种基础模型扮演专业角色。Vlogger引入了视频扩散模型ShowMaker,融合文本和视觉提示以增强空间-时间连贯性。系统能从开放描述生成超过5分钟的连贯vlogs,在脚本和演员方面保持一致性。

tango - 利用扩散模型和大语言模型实现先进的文本到音频生成

GithubTango人工智能开源项目文本转音频生成潜在扩散模型音频生成

Tango是一个创新的文本到音频生成模型,结合了潜在扩散模型和大语言模型技术。该模型使用冻结的Flan-T5作为文本编码器,训练UNet扩散模型生成音频。尽管训练数据集较小,Tango的性能仍可媲美最先进模型。Tango 2版本通过在Audio-alpaca数据集上的DPO对齐训练进一步提升了生成质量。项目开源了模型代码和预训练权重,为音频生成研究提供了有价值的资源。

DynamiCrafter - 将开放域图像转化为动态视频的AI动画工具

AI动画DynamiCrafterGithub图像动画化开源项目视频插帧视频生成

DynamiCrafter是一个图像动画化项目,能够基于文本提示将静态图像转换为动态视频。该项目利用预训练的视频扩散模型,生成高分辨率、连贯性强的动画。除了基础的图像动画化功能,DynamiCrafter还支持故事视频生成、帧插值和循环视频生成等应用。该项目在ECCV 2024会议上进行了口头报告,并在多项图像到视频生成基准测试中表现出色。

Emojinator - 基于机器学习的手势表情识别与分类

EmojinatorGithub开源项目手势识别机器学习电子信息表情符号

Emojinator项目通过机器学习技术提供不同手势表情的识别和分类解决方案。项目包含多个版本（如Emojinator 2.0和3.0），有详细的文件组织结构和创建手势及训练模型的代码。特别适合需处理电子消息和网页表情符号的应用场景，欢迎开发者们尝试使用。

FlashFace - 高保真人物图像个性化生成技术

AI绘图FlashFaceGithub人像定制图像生成开源项目身份保持

FlashFace是一项人物图像个性化生成技术，可在几秒内实现零样本人物图像定制，具有出色的身份保持能力。该技术能精确响应语言提示，并支持灵活调整身份图像和语言提示的控制强度。FlashFace可使用单张或多张参考人脸，对非名人也能有效保持身份特征，同时支持改变人物年龄或性别。

相关项目

推荐项目

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手，通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能，支持100+编程语言，与主流编辑器无缝集成，显著提升开发效率和代码质量。

AI写歌

Suno AI是一个革命性的AI音乐创作平台，能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐，Suno AI都是音乐爱好者和专业人士的理想选择。

有言AI

有言平台提供一站式AIGC视频创作解决方案，通过智能技术简化视频制作流程。无论是企业宣传还是个人分享，有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Kimi

Kimi AI助手提供多语言对话支持，能够阅读和理解用户上传的文件内容，解析网页信息，并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题，Kimi都能以友好、专业的方式提供帮助。

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术，为商家提供一键生成商品图和营销文案的服务，显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台，让商品第一时间被种草。

吐司

探索Tensor.Art平台的独特AI模型，免费访问各种图像生成与AI训练工具，从Stable Diffusion等基础模型开始，轻松实现创新图像生成。体验前沿的AI技术，推动个人和企业的创新发展。

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器，它将改变您观看视频的方式！SubCat结合了先进的人工智能技术，为您提供即时视频字幕翻译，无论是本地视频还是网络流媒体，让您轻松享受各种语言的内容。

美间AI

美间AI创意设计平台，利用前沿AI技术，为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图，再到文案生成，美间让创意设计更简单、更高效。

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具，简化了选题、文献检索至论文撰写的整个过程。通过简单设定，平台可快速生成高质量论文大纲和全文，配合图表、参考文献等一应俱全，同时提供开题报告和答辩PPT等增值服务，保障数据安全，有效提升写作效率和论文质量。

使用协议隐私政策广告服务

投诉举报邮箱: service@vectorlightyear.com