StoryToolkitAI 项目介绍
项目概述
StoryToolkitAI 是一款电影编辑工具,设计旨在帮助用户更高效地编辑电影素材。该工具通过人工智能(AI)技术理解视频内容,并提供自动剪辑及编辑支持。用户可以使用大型语言模型(如 OpenAI 的 GPT-4)进行场景索引,搜索内容,自动选择并生成故事,从而大大简化了影片编辑的过程。生成的编辑结果可以通过 EDL 或 XML 格式导入至常用的编辑软件中。与其他编辑软件无依赖地独立运行,尤其是可以与 DaVinci Resolve Studio 18 进行集成。
主要功能
- 完整视频索引与搜索:用户可以方便地搜索视频内容,无需精准键入关键词。
- 本地免费自动转录与翻译:支持将音频内容在本地机翻译为英语,完全免费。
- 与 OpenAI GPT 及 ollama 兼容:允许用户与 AI 讨论内容或生成新创意。
- 故事编辑器:可撰写包含转录内容的剧本,并导出为EDL、XML或Fountain格式。
- 利用 AI 生成故事与选集:基于视频素材,Ask AI 功能让创作更加轻松。
- 自动识别讲话者:准确识别并标注转录中的讲话者。
- 项目文件管理:更直观的操作流程,提升搜索效率。
- 多格式转录导出:支持导出为 SRT、TXT、AVID DS 或 Fusion 文本节点格式。
- 导入现有的 SRT 文件:便捷地从现有字幕文件中导入内容。
Resolve Studio 集成
- 通过转录标记和导航 Resolve 时间线:利用转录内容标记并导航时间线。
- 高级搜索:使用 AI 技术进行 Resolve 时间线标记的深度搜索。
- 字幕直接导入至 Resolve 仓库:支持直接将字幕导入至项目中。
规划中的功能
- 自动主题分类,以帮助用户在转录中发现新的创意。
- 支持本地或自定义的 LLM 模型。
- 集成其他 AI 工具以扩展功能。
- 支持与其他软件或独立播放器集成。
开源与社区支持
StoryToolkitAI 由 Octavian Mot 开发,我们邀请对技术解决方案感兴趣的朋友贡献代码,积极参与 GitHub 上的讨论。这个工具是开源项目,依赖于众多开源项目,如 OpenAI Whisper、Sentence Transformers、spaCy 等。
数据隐私与使用
StoryToolkitAI 在用户本地机器上运行,原则上不会将用户数据上传至互联网,确保信息的敏感性和隐私性。如果用户激活了一些需要互联网连接的功能,比如通过 StoryToolkitAI API 或 OpenAI API 访问 Assistant 功能,只有用户选择发送的内容会被发送至服务器。
欢迎对工具的使用提出反馈或建议。用户可通过 GitHub 提交问题或报告使用中的问题。我们希望 StoryToolkitAI 能成为每一位创作者的有力助手,助力精彩创作。